Das Marmorpalais im Neuen Garten am Heiligen See wurde zwischen 1787 und 1791 von Carl von Gontard als Sommersitz für die preußischen Könige errichtet.

Das als Meisterwerk des preußischen Frühklassizismus geltende Bauwerk wurde 1797 von Boumann umgestaltet und 1843-45 durch die Architekten L. Persius und L.F. Hesse weiter ausgebaut. Die Turmhalle erinnert an den Turm des Rathauses am Alten Markt und erlaubt eine Aussicht vom Jungfernsee bis zur Pfaueninsel.