Původní tvrz ve Svatobořicích zanikla za husitských válek. Novou tvrz z konce 15. století rozšířil kolem roku 1580 Bohuš Morkovský ze Zástřizl na renesanční zámek, který byl později barokně upraven a po připojení Svatobořic k milotickému panství přestavěn na pivovar. Pozůstatkem původní sochařské výzdoby zámku jsou dvě busty římského boha Januse. Janus byl bůh vchodu a východu a zobrazoval se s dvěma tvářemi, z nichž jedna hledí dopředu a druhá dozadu. Mezi lidem dostaly tyto busty přezdívku Svatoborské opice.