U dvorištu palate nalazi se česma Patrijarhovac, posvećena Bogojavljenju, izgrađena je 1864. godine.
Zgrada je tokom vremena pretrpela više obnova. Godine 1920. izvedena je prva obnova po planovima bečkog arhitekte Rudolfa Zibeka, unošenjem rokajnih elemenata. Ovim izmenama ona je dobila izgled letnjikovaca iz vremena Josifa II. Poslednji radovi na sanaciji zgrade izvedeni su 2007. godine.
Palata Josifa Rajačića je 1948. proglašen spomenikom kulture, da bi naknadno bio kategorisan kao kulturno dobro od izuzetnog značaja.
Danas je u palati smešten Zavičajna zbirka Sremski Karlovci, kao deo Muzej grada Novog Sada. U muzeju se nalazi etnološka zbirka predmeta, sa sobom i kuhinjom sa kraja 19. veka.
Radno vreme: 09-17 časova, svakog dana sem nedeljom (osim za najavljene posete )
Adresa: Patrijarha Rajačića, Sremski Karlovci