Data powstania zamku to lata 1831–1837, wówczas to właściciel Szczytnej, major i hrabia Leopold von Hochberg wybudował swoją rezydencję niedaleko miejsca, w którym pod koniec XVIII w. Prusacy wybudowali Fort na Szczytniku[1][2], niewielki fort, zburzony w 1807. Zamek w obecnym kształcie stoi od niedawna. Zachodnia, najstarsza jego część zbudowana była w latach trzydziestych XIX w. Niekiedy bezpodstawnie przypisuje się projekt obiektu wybitnemu pruskiemu architektowi Karolowi Fryderykowi Schinklowi[2]. Budowla była wzniesiona jako rezydencja magnacka.
Po śmierci hrabiego w 1843 zamek stał się własnością jego siostry, która jednak szybko go sprzedała. Później posiadacze zmieniali się często, aż w 1860 kupili go bracia Rohrbachowie, właściciele huty szkła w Batorowie. Córka jednego z nich, Helena Klein wraz z mężem przeprowadziła remont, podczas którego dobudowano kaplicę[2].
Następnie właścicielami byli Misjonarze Świętej Rodziny. Rozbudowali oni zamek i kaplicę oraz rozpoczęli budowę Kalwarii, której nie dokończyli ze względu na wojnę. W latach 50. zamek został przejęty przez państwo i zamieniony w dom pomocy społecznej dla niepełnosprawnych intelektualnie mężczyzn. W 2006 orzeczeniem Komisji Majątkowej przy MSWiA oddano zamek Domowi Zakonnemu Misjonarzy Świętej Rodziny. Decyzja Komisji została zaskarżona przez powiat kłodzki na drodze postępowania sądowego[3][4]. W 2007 powstało Bractwo Rycerskie Matki Bożej Królowej Pokoju w Szczytnej.