Pod obroncima Vidove gore, na južnom dijelu Brača, u 15. i 16. stoljeću mnogi su svećenici tražili zaštitu od prodora Turaka. U spilji Ljubitovici, na strmom kamenitom obronku, dvojica su glagoljaša iz obližnjih Poljica davne 1551. pronašla zaklon.
Tako je osnovano naselje u kojem će se kroz godine izgraditi samostan i crkva te razne druge ugledne i neugledne zgradice. Blaca je prerastala u pravi povijesni biser koji se, poput kameleona, stapa s okolinom i kojeg bi danas svatko tko posjeti Brač trebao vidjeti.
Pustinja Blaca kandidat je za UNESCO-vu listu svjetske baštine (UNESCO World Heritage Tentative List). Tu su, osim vrlo zanimljivih građevina, zvjezdarnica, bogata zbirka starinskog oružja, knjižnica, zbirka starinskih satova...