Jednou z dominant Nasavrk je zámek, který stojí na místě bývalé tvrze. Ta byla vybudována v 10. – 11. stol. jako strážiště pro celníky, kteří udržovali bezpečnost na zemských stezkách. Dodnes se z původní tvrze dochovala část zdiva, která byla přístupná chodbou pod zámkem.Kolem roku 1600 nechal Václav Záruba z Hustířan zbourat nevyhovující tvrz a na jejím místě vystavěl nový moderní dvoupatrový zámek se dvěma věžičkami, zdobený psaníčkovými sgrafity.
Před rokem 1839 byla vedle zámku postavena velká úřední budova, dnešní městský úřad a menší budova, kde bylo později zřízeno vězení. Roku 1840 došlo k poslední zásadní přestavbě, kdy bylo sníženo druhé patro. Roku 1939 koupila celý zámecký objekt Lidová záložna (řízená Lidovou stranou), která v dolní místnosti zřídila kancelář a v další prodejnu spotřebního zboží. Do zámku se také přestěhoval tělocvičný spolek Orel, který postavit v horní chodbě tělocvičnu. Všechny místnosti byly obsazeny místními občany. Jeden čas zde byla i knihovna, prodejna zeleniny, sběrna mléka a výrobna prádla. Prostory nebyly udržované.
Roku 1987 se do zámku přestěhovala Krajská správa Chráněné krajinné oblasti Železné hory. Od tohoto roku se začalo s opravami zámku. Byla položena nová eternitové krytina a dlažba, zřízeno sociální zařízení. Další velké opravy přinesly dnešní podobu zámku (nová okna, dveře, schodiště, celková rekonstrukce vyhořelého druhého patra).
Zámek má nepravidelný obdélníkový půdorys. V průčelí vchodu je pískovcový portál s bohatou reliéfní výzdobou. Velice cenná je výzdoba vstupní přízemní haly, kde je valená klenba. Pod zámkem jsou zasypaná stará sklepení s těžkým žalářem – temnicí, která jsou však uzavřena.
Dnes jsou prostory zámku užívány ke kulturním účelům. Probíhají zde výstavyNasavrcké palety, hudební večery, svatby (obřadní síň zdobí velká socha známého českého sochaře Olbrama Zoubka), vítání občánků a další akce. V přízemí je Informační centrum a cestovní kancelář. Ve prvním patře je celoroční expozice „Po stopách Keltů“.
Webová stránka: http://www.inasavrky.cz
