Il castello prende il nome dal primo proprietario Andrea Di Paolo degli Abbati,  fu al centro di lotte tra gli Sforza di Milano e le truppe mercenarie di Nocolò Piccinino al soldo del Papa.


Da vedere ingresso del castello, la Chiesa Parrocchiale di San Bernardino con tavola di scuola del Pinturicchio.