La fortaleza se utilizó como prisión de Estado de la antigua Corona de Aragón.

Por sus mazmorras pasaron presos ilustres como Jaume de Aragón, conde de Urgel (donde falleció en 1433).