La struttura del castello è un monumentale volume perfettamente geometrico, diretta espressione di rapporti matematici e simbolici: un ottagono, distinto agli spigoli da altrettante torri della stessa forma. L’otto è il numero che lega l’infinito al finito, ricollegato alla forma delle fonti battesimali, ma anche alle simbologie precristiane. Una cornice marcapiano cinge l’intera costruzione segnando la presenza dei due piani dell’edificio, divisi ognuno in otto sale corrispondenti agli otto lati dell’ottagono. Ogni parete del castello compresa tra due torri presenta due finestre: una monofora a tutto sesto in corrispondenza del piano inferiore (tranne che nei due lati opposti est e ovest, occupati rispettivamente dal portale principale e dall’ingresso di servizio) e una bifora al piano superiore (tranne che nel lato nord, quello in direzione di Andria, aperto con una trifora). La distribuzione dello spazio interno si articola su due piani, ognuno dei quali presenta otto stanze di forma trapezoidale con volta a crociera e illuminate da grandi finestre. Il prospetto principale, sul lato est, è dominato da un maestoso portale cui si accede da due rampe di scale simmetriche. Il cortile centrale, compatto e severo, ripete nella forma ottagonale l’impostazione di tutto l’edificio. Anche i materiali da costruzione e i loro colori concorrono, con la loro combinazione e distribuzione, alla percezione complessiva: la pietra calcarea locale, bianca o rosata, per le strutture  architettoniche e  in  alcuni particolari decorativi; il  marmo, bianco  o leggermente venato, nelle  preziose finestre del primo piano e nella decorazione  delle sale; la  breccia  corallina, usata  nella decorazione delle sale al piano terra e nelle rifiniture di porte e finestre  oltre che nel portale  principale. Notevole è la decorazione scultorea di reminiscenza classica.