Klášter se nachází na návrší v obci Svätý Anton nedaleko Banské Štiavnice.
První zmínky o hradě Svätý Anton sahají do 15. století, kdy obec vlastnili bratři Kazovci. Roku 1415 se vzpomíná jako menší opevněná stavba - castellum. Další zmínky jsou až z druhé poloviny 16. století, kdy se začínala projevovat hrozba tureckých nájezdů na Slovensko. Na místě staršího hradu dal roku 1744 jeden z příslušníků rodu Koháryovců postavit pozdně barokní jednoposchoďový čtyřkřídlý klášter s obdélníkovým nádvořím. Na první poschodí se přichází z podjezdu hlavního vchodu v severním křídle reprezentačním schodištěm s kamennými sochami do přijímacích prostorů. Odtud je možné projít do společensko-reprezentačních místností nebo na chodby obíhající další tři křídla kláštera. Z chodeb osvětlených okny do nádvoří jsou přístupné jednotlivé navzájem propojené místnosti. Z období stavby kláštera jsou i nástěnné malby nad schodištěm a v kapli. V klášteře se zachovalo poměrně mnoho původně zařízených i později doplněných místností, které jsou vlastně nábytkovým muzeem a sbírkami různých uměleckých předmětů, obrazů a rytin, kterých je na Slovensku velmi málo. V 19. století byly některé místnosti ještě změněny a zařízeny podle tehdejší módy. V současnosti je v klášteře myslivecké muzeum. Hrad není zajímavý jen svými sbírkami, ale i podzemními chodbami a v neposlední řadě i vystoupeními sokolníků z dvoru Astur.