Eredetileg ezeken a helyeken mocsarak voltak, a 19. században pedig már Sztáray gróf fogadója állt itt.

Maga a Grosz palota épülete 1905 körül épült a magyar eredetű helyi szecesszió stílusában (az épület építészei Papp G. és Szabolcs F. voltak eredetileg Grosz vezetéknévvel -  innen származik a palota neve is).

Az épület jellegzetes a sarokszögletes tornyával, mely - a kohászatot szimbólizálva – kalapácsban végződött. Az utcára nyíló szárnyban eredetileg szálloda volt, a többit lakhatásra használták.

Az épület éveken keresztül a Durschlag család tulajdonában volt.

A háborúk közötti időszakban az épületben Duna (Dunaj) bank, később Földműves bank működött, továbbá volt itt ékszerészet, órás, üzletek, étterem, iroda vagy lakás is.

A második világháború után egy gyógyszertár működött az épületben, valamint a helyiségek egy része a Bisztróként szolgált (gyorsétterem volt itt).