L’imperatore Federico II fu il primo a costruire il castello di Brindisi nella prima metà del XIII secolo. Successivamente, gli Angioini restaurarono l’edificio e, verso la fine del XV secolo, gli aragonesi decisero di ampliarlo. Infine, nel XVI secolo Carlo V fece ulteriori lavori di rinforzo della struttura.