All’ingresso la snella, ma al tempo stesso imponente, Torre di Ser Ivano annuncia la struttura del castello protetto da due cinte murarie. Le strutture murarie consegnateci dal tempo risalgono ai primi decenni del XII secolo ed ebbero il loro massimo splendore al tempo della potente dinastia degli Ezzelini. Il castello rimase in perfetta efficienza anche con le successive dominazioni dei Visconti e degli Scaligeri. Nel XV secolo la fortificazione era ancora attiva prima di passare al dominio veneziano. In seguito fu dismessa e trasformata. L’intero complesso è stato oggetto di svariati interventi di restauro e attualmente gli spazi interni sono destinati ad accogliere mostre temporanee.