Il palazzo del Podestà venne realizzato nel 1255 in pietra bianca di Vallemontagnana, e consta di tre corpi di fabbrica, di cui quello centrale presenta un arco gotico decorato.
Affrescato nel 1326 dal pittore Ventura di Francesco, l’edificio tra il 1911 e il 1922 venne restaurato per essere riportato allo stato originario.
Oggi ospita la sede degli Uffici Finanziari del Comune di Fabriano.