U sklopu Narodnog sveučilišta Vela Luka 1965. godine je otvorena muzejska zbirka. Tada su, u palači Franulović Repak, pod vodstvom Franka Oreba, bili izloženi rimski i ostali arheološki nalazi iz okolice mjesta, modeli brodova samoukog rezbara Nedjeljka Gugića Kotarca, etnografski i predmeti iz NOB-a.
Organizacijom Međunarodnih susreta likovnih umjetnika (od 1968. do 1972.) nastala je značajna zbirka mozaika. Ukidanjem Narodnog sveučilišta 1975., formirao se „Centar za kulturu", kao dio mjesne konferencije Socijalističkog saveza radnog naroda Hrvatske, a u njegovu sklopu se integrirala i galerijska i knjižnična djelatnost.
Rekonstrukcijom zgrade Franulović Repak (Repkovi dvori) 1981. riješeno je i pitanje adekvatnog smještaja ovih sadržaja. Tada je u njegovom prizemnom dijelu postavljena privremena arheološka zbirka, u kojoj su se već prije okupljenim nalazima pridružili i artefakti iz Vele spile (sustavna istraživanja su započela 1974.).
Istovremeno je otvorena i Galerija u kojoj je izložen dio Međunarodne poklon zbirka crteža, grafike i male plastike. Od 1986. u Centru je zaposlen arheolog, a u listopadu 1990. otvorena je stalna arheološka zbirka. Centar za kulturu se osamostalio 1995. Od 2002. u Centru je zaposlen povjesničar umjetnosti i muzeolog, a krajem 2007. je iz njegova sklopa izuzeta knjižnična djelatnost.
Dosada je izdano desetak publikacija i suorganizirano nekoliko znanstvenih i stručnih skupova. Centar za kulturu organizira arheološka istraživanja, ponajprije Vele spile, i redovito organizira izložbe.