První písemná zmínka pochází z roku 1281 a prvními majiteli panství byli Berkové z Dubé. V roce 1463 jim král Jiří z Poděbrad toto panství zkonfiskoval a získali jej Vartemberkové. V roce 1471 koupili Šluknov míšeňští vévodové Arnošt a Albrecht. Dalšími majiteli byli Šlejnicové, od roku 1618 Otta ze Starscheldu a poté Mansfeldové. V roce 1663 zdědila tento majetek Žofie Anežka, provdaná Ditrichštejnová. V roce 1721 panství vyženili Harrachové. V roce 1876 panství koupil Alfréd Grumbt a posledním majitelem zámku byl v letech 1935 – 1945 Ervín Leopold hrabě Nostitz – Rieneck.