Il castello di Sesto Campano e’ ubicato al centro del paese e domina tutta la piana di Venafro. 
I sanniti si servivano del palazzo per sorvegliare la strada che conduceva alla regione Campania.
La costruzione del castello si deve al popolo longobardo.
Nonostante le torri, il fossato ed il ponte levatoio nel XIII secolo fu vittima di attacchi, ma fu subito ricostruito dalla famiglia Sorellum Nel ‘600 l'edificio da fortezza divenne residenza signorile.
Dato che il palazzo segue l'andamento del terreno su cui è edificato la sua panta è irregolare nonchè presenta sul lato nord una torre a pianta quadrata.
Alcuni elementi di origine longobarda si sono persi con il passare degli anni come il fossato, il ponte levatoio e le torri merlate.
Al palazzo si accede dal portale centrale in pietra calcarea che conduce subito alla corte che a seguito dei lavori di rifacimento e’ stata sostituita da alcuni edifici.
La struttura si eleva su tre livelli di cui il primo piano accoglie il museo delle arti e tradizioni popolari di Sesto Campano, mentre il secondo piano ospita tre raccolte “museali”: archeologia, storia e scienza.