Budynek zachował swój oryginalny układ renesansowego obiektu mimo późniejszych przebudów, przeprowadzonych przede wszystkim po pożarze z 1799 roku, kiedy to budynek został bardzo uszkodzony. W połowie XIX wieku prowadzono kolejne zasadnicze przebudowy budynku. Po południowej stronie dobudowano murowany ganek, nietypowy dla Trutnova. W sali na poddaszu odbywają się wernisaże i programy kulturalne, stała ekspozycja mieści się piętro niżej. Chlubą galerii jest obraz Josefa Čapka „V růžové světnici“ (W różowej izbie) z 1937 roku, rzeźby Oty Gutfreunda oraz kolekcja dzieł sztuki przedstawiająca regionalny i czeski rozwój sztuk pięknych.