Trg se nalazi u zapadnom delu gradskog središta i nedaleko od reke Save i pešačkog Mosta svetog Irineja.
Žitni trg sa okolnim ulicama predstavlja najstariji deo grada, koji je obrazovan još u tursko vreme (17. vek). Trg i danas nosi odlike turskog urbanizma – trougaoni oblik, nepravilne strane i postepen prelazak u ulice koje se ugaono stiču u njega. Takođe, i okolne ulice sa orijentalnim osobenostima – krivudave su i uske, sa brojnim slepim sokacima i prolazima.
Do pre 50 godina trg je bio poznat kao Žitna pijaca, budući da je kroz istoriju to bila glavna namena trga. Tada je trg raskopan, čime su otkriveni ostaci starorimskog Sirmijuma. One su i danas otkrivene, što ovom trgu daje nesvakidašnji izgled. Predstavljaju ostatke trgovačkog dela grada. Zanimljivo je da je trg i danas trgovačko stecište građana i da se oko trga nalaze trgovačke i ugostiteljske radnje.
Sredinom avgusta 2017. godine započeti su radovi na rekonstrukciji Žitnog trga, koji su završeni 2018. godine.