Fu progettato da Paskoje Miličević e in origine fungeva da dogana della Repubblica di Ragusa, con le merci controllate e immagazzinate nel cortile. Col tempo ospitò anche la zecca, il tesoro e un'accademia di eruditi. Fu uno dei pochi edifici a sopravvivere in gran parte intatto al terremoto del 1667.
Oggi il palazzo ospita l'Archivio di Stato di Dubrovnik, con documenti che risalgono a secoli fa, e una sala commemorativa per i difensori della città nella guerra degli anni Novanta. Il cortile è spesso usato per mostre e concerti.
Piazza Luža, che lo circonda, riunisce diversi monumenti: la Torre dell'Orologio, la Colonna di Orlando, la Piccola Fontana di Onofrio e la chiesa di San Biagio. È il naturale punto d'arrivo di una passeggiata lungo lo Stradun da Porta Pile.
