Di fronte alla chiesa parrocchiale sorge il Palazzo Pretorio (Castello dei Torriani e Bandello) col bel porticato ogivale, bifore e arengo. Al piano superiore alcune sale con affreschi dei secoli XV e XVI. Il castello è dominato da una torre merlata, alta 39 metri, le cui strutture originarie sono antichissime. All'interno è situata la Biblioteca “Pier Angelo Soldini”, animatrice della vita culturale castelnovese.