Nel 1552 il nuovo assetto si sviluppa intorno al castello a pianta esagonale, dimora del principe. Il piano era a reticolato con ordinamento romano da nord a sud per gli edifici gonzagheschi e le piazze e da est a ovest per le abitazioni. Molte case sono state abbattute nonostante le proteste della popolazione. Dei fabbricati rimangono solo i resti di due scuderie, ma tutto il terreno doveva essere circondato da un fossato con un ponte levatoio come ingresso, con 4 torrioni agli angoli. Il palazzo principesco doveva avere pianta esagonale, con sei torrioni con scale all'interno, loggiati e porticati. I quartieri erano tre: il più importante quello verso il fiume con il porto. La piazza coincide con quella che oggi è piazza XXIII aprile, circondata da porticati con archi a tutto sesto, che si restringe in direzione della scalinata di accessso al fiume. Le costruzioni della piazza risalgono tutte alla metà del 1500 fino alla metà del XVII secolo; in alcuni edifici sono ancora presenti soffitti in legno. Gli affreschi rimasti di quel periodo sono quelli della sala principale dell'attuale albergo "Il Leone", casa signorile rimasta intatta dal 1630, con un salone di ricevimento adibito anche a piccolo teatro; il soffitto è a cassettoni e gli affreschi ad olio rappresentanti i 4 continenti e i mestieri locali.