La rica y tumultuosa historia del castillo arroja luz no solo sobre la historia de la Gascuña entre los siglos XII y XIV, sino más ampliamente sobre la Guerra de los Cien Años, de la cual la fortaleza fue uno de los teatros de operaciones. Fue construida por Enrique III Plantagenet, Rey de Inglaterra, alrededor de 1230-1250, en el sitio de una primera torre construida a finales del siglo XII por Ricardo Corazón de León.

​

Es ardientemente disputado entre soldados ingleses y franceses durante la Guerra de los Cien Años (1337-1453). Uno de los asedios más conocidos al castillo de Quat'Sos está narrado en "Los Reyes Malditos", la famosa saga histórica de Maurice Druon. A finales del verano de 1324, por quinta vez, los ejércitos franceses asedian el castillo. Allí experimentan un nuevo arma, las "bouches à feu" (bocas de fuego)...