Původně gotická tvrz s kaplí, v renesanci přestavěná na zámek. První písemná zmínka o obci Chvaly pochází z Vyšehradské kapituly roku 1070. Chvaly jsou ve 14.století prodávány a dědičně postupovány bohatým pražským měšťanům. O existenci tvrze nás informuje až majetková zpráva z roku 1428. Od roku 1652 se stává majetkem jezuitského konviktu v Praze. Po úderu blesku roku 1734 tvrz vyhořela. V té době byla tvrz přestavěná do dvoupatrové podoby zámecké v renesančním stylu. Po zrušení jezuitského řádu roku 1773 přešel zámek pod správu c.k. Zemského studijního fondu a v roce 1918 byl majetek převeden do vlastnictví Československého státu.Po druhé světové válce v roce 1950 byl zámek převeden do organizace "Československé státní statky", kde se přiblížil k zániku. Od roku 1992 se postupně vyvíjely iniciativy k obnově památky, které vyvrcholily rekonstrukcí za přispění evropských strukturálních fondů v letech 2006 až 2008. Od 1. 5. 2008 je zámek veřejnosti přístupný jako městské kulturní a informační centrum.