Jediná dcera barona Karla Theodora Sturmfedera, Ottilie, se v roce 1856 ve svých jednadvaceti letech provdala za barona Karla Henneberg-Spiegla. Žili spolu a se svými dětmi na statku Hrzín u Skalné na Chebsku. Ottilie zemřela při porodu posledního dítěte ve svých 29 letech. Karel Henneberg-Spiegl se svými čtyřmi dětmi přestěhoval do Hrádku, neboť tchán Karel Theodor Sturmfeder je stanovil za své dědice.
V roce 1898 se jediný syn, Karla Henneberg-Spiegla a Ottilie, Bohumil oženil s dcerou známého hraběte Jana Harracha, Annou Marií Harrachovou. Bohumil Henneberg-Spiegl se o převzatý majetek pečlivě staral. Působil v řadě spolků, svazů a sdružení a zvláště se věnoval Sboru dobrovolných hasičů.
Manželství Bohumila Henneberg-Spiegla a Anny Marie zůstalo bezdětné a tak není divu, že se budoucnost hrádeckého velkostatku jevila v chmurných barvách. V roce 1934 Bohumil Henneberg-Spiegl umírá jako poslední mužský potomek svého rodu. Univerzální dědičkou se stala jeho manželka a vdova Anna Marie Henneberg-Spieglová, která byla majitelkou až do své smrti, do roku 1938. Za doby okupace se o zámek staral Dr. Josef Windischgrätz.
Po konci 2. Světové války byl zámek i velkostatek zkonfiskován. Zámek převzala Pražská obec baráčnická jako rekreační objekt. Po šlechtických majitelích byl zámek plně zařízen a v dobrém stavu, ale po půlroční správě pražské obce baráčníků zůstaly na zámku již jen holé zdi. Zázrakem je, že se jako jediný dochoval interiér zámecké kaple.
Zámek se proměnil na byty pro přibližně 20 rodin. O údržbu zámku se nikdo nestaral a tak chátral a stával se čím dál tím víc neobyvatelným. Pro havarijní stav se v roce 1976 zřítila zámecká věž a zámek se postupně vylidňoval.
Po roce 1989 nebyl zpátky navrácen původním majitelů, jelikož o něj nikdo v restituci nepožádal. Po roce 1990 se na zámku prý objevila mladá paní, která tvrdila, že je dědičkou posledních majitelů, ale po zhlédnutí tristního stavu objektu se nikde oficiálně nepřihlásila.
Záchranou pro zámek se stává rok 2000, kdy jej zakoupil architektonický a projekční ateliér Šumavaplan a zahájil 10 let trvající opravy hlavní budovy zámku. V červnu roku 2010 zámek slavnostně otevřel své brány a dodnes vítá návštěvníky toužící po romantice v zámeckém hotelu, odpočinku ve wellness, dobrém jídle v restauraci nebo po kulturním vyžití během celého roku.