První písemná zmínka pochází z 6.dubna 1253, kdy král Václav I. daroval Dobřichovice Rytířskému řádu Křižovníků s červenou hvězdou. To však již stál na území dnešního Karlíku hrádek s románskou rotundou a při brodu přes řeku Berounku tvrz. V roce 1420 zastavil král Zikmund Dobřichovice rytíři Zikmundu Bolechovcovi z Pušperka. Po několika dalších zástavních majitelích vykoupil Dobřichovice v roce 1498 velmistr Matěj ze Střebska od Heřmana z Říčan a Jana Šrámka. Za velmistra Zbyňka Berky z Dubé byla v 16. stol. tvrz přestavěna na renesanční zámek.