Tato památka patří dlouhodobě pro špatný stav k těm nejohroženějším na Vysočině. Rekonstrukci brzdily spory o vlastnictví.
Zámek však lze navštívit například po domluvě s kastelánem, který zajistí i komentovanou prohlídku. Nejcennější částí zámku je Sál vjezdů s rozměrnými barokními plátny Karla Františka Teppera, zobrazujícími vjezdy císařů do Brtnice. Pod zámkem je rozlehlé středověké sklepení, areál obklopuje park s romantickým ostrůvkem.