La primera planta se construyó hacia el siglo IX a instancias de Docibile I, duque de Gaeta y constaba de una única torre poligonal y una muralla con torres. A mediados del siglo X, la estructura original, un importante puesto de avanzada hacia el interior del Ducado de Gaeta, se amplió a instancias de Marino I ° (nieto de Docibile I °) con la construcción de una segunda torre cuadrada que superó la existente. poligonal. Hacia mediados del siglo XIII, el feudo de Itri pasó a manos de los Caetani. El castillo se amplió con la construcción de una zona residencial de dos plantas creada conectando la torre poligonal a la cuadrada, una tercera torre, un camino de vigilancia y un patio de armas. La tercera y última torre, de forma cilíndrica y conectada por la pasarela de patrulla al cuerpo residencial y es conocida como la "torre del cocodrilo", ya que según una leyenda no confirmada por documentos, la parte inferior de esta torre estaba llena de agua y contenía un caimán feroz, al que se lanzaba a comer a los presos condenados a muerte. La zona del condado, como muchas otras a lo largo de la costa del Lacio, fue escenario de incursiones de piratas árabes; precisamente para escapar de un probable secuestro por parte del pirata magrebí Kedir El Din (La Barbarroja) Giulia Gonzaga encontró refugio en la fortaleza de Itri. Condesa feudal de Fondi y viuda de Vespasiano, Giulia Gonzaga además de ser una mujer fascinante fue una de las mujeres más ilustres del Renacimiento, famosa por los artistas y escritores que formaron parte de su corte.

En los siglos XVII y XVIII los territorios del condado de Fondi pasaron a formar parte del Reino de los Borbones y debido a su posición, Itri se encontró en la zona fronteriza con el Estado Pontificio, tristemente célebre con el sobrenombre de "tierra de nadie". afligido por el fenómeno del bandolerismo. La fortaleza de Itri en esos siglos fue perdiendo su importancia defensiva y fue progresivamente abandonada; el bandolero Marco Sciarra, que durante algún tiempo había estado al frente de un gran número de bandoleros esparcidos por toda la frontera, se aprovechó de ella para apoderarse de ella. El castillo se convirtió así en su cuartel general desde el que pudo dominar gran parte de la Via Appia, frecuentemente recorrida por viajeros desafortunados que fueron extorsionados por Sciarra y sus bandidos. Según una leyenda, la figura de Michele Pezza, un famoso bandido nacido en Itri en 1771 y conocido como Fra 'Diavolo, también tenía que ver con la fortaleza de Itri; Se dice que contra las tropas francesas del general Jean Etienne Championnet, utilizó algunos pasajes subterráneos del castillo para escapar de la ciudad y burlarse del general y del ejército francés en varias ocasiones.

En tiempos más recientes, durante la última Guerra Mundial, la fortaleza de Itri se encontró una vez más en el centro de un área estratégica donde se llevaron a cabo feroces combates: la Línea Gustav. Dañado junto con la ciudad por los fuertes bombardeos estadounidenses, el castillo reportó grandes daños en los techos del edificio residencial, una parte de la torre poligonal fue destripada y una gran parte de los muros almenados que cubrían las distintas estructuras se perdió.

Después de años de abandono, la estructura fue comprada en 1979 por la Provincia de Latina para luego ser donada al municipio de Itri y restaurada. La inauguración de la primera parte restaurada tuvo lugar en 2003, sin embargo, solo en 2007 se inauguró toda la estructura. El Castillo de Itri ahora se puede visitar por una tarifa y alberga exposiciones, mercados de artesanía local, conferencias y diversas ceremonias.

Se ingresa al castillo pasando por el patio de armas, rodeado por una muralla y pequeñas torres. Subiendo unas escaleras llegas a una recepción donde pagas la entrada (5 euros) y un amable guía comienza a explicarte la historia del castillo. La visita parte de las habitaciones de la izquierda (correspondientes al primer piso de la urbanización) tres amplios y austeros salones; de la segunda se puede bajar a la planta baja, que consta de tantas habitaciones probablemente destinadas al uso doméstico en el pasado, como se supone que son los restos de un horno y un tanque utilizado para almacenar alimentos; además es posible observar la antigua cisterna donde se recogía el agua de lluvia. En el segundo piso se pueden ver los restos de una chimenea y los de un fresco que representa a Sant'Antonio abate y una Virgen con el Niño en el lugar donde se encontraba la capilla privada de los Caetani. Subiendo la última escalera, es posible salir y acceder a la gran terraza panorámica, desde la que se domina el recorrido de la Via Appia cerca de la ciudad y la vista se extiende desde las montañas Aurunci hacia el norte hasta ver Gaeta y el mar hacia el sur, admire el fascinante panorama, camine por la característica pasarela que conecta el edificio residencial para dirigirse hacia la legendaria torre circular; a través de una amplia escalera de caracol es