L'edificio viene eretto tra la fine dell’XI e l’inizio del XII secolo, su una costruzione precedente sicuramente araba, ad opera del primo feudatario normanno Rodolfo Bonello. Per raggiungere il Castello basta percorrere il Corso Umberto I e salire i gradini della Badia. Si hanno così, davanti, la porta e le possenti mura medievali dell'XI e XII secolo che un tempo tracciavano l'antico borgo. Il Castello fu oggetto di varie trasformazioni nel corso dei secoli, l'edificio presenta nell'impianto e nella struttura architettonica diverse sovrapposizioni di stile portate alla luce durante il recente restauro.