Construido por Pere Bonfill, quien se inspiró en las torres de Castell Nuovo en Nápoles, las Torres de Quart representan un buen ejemplo de construcciones militares del gótico tardío. Fueron concebidos como puertas defensivas para la ciudad y hasta 1874 se conocieron como las Torres de la Cal (Torres de piedra caliza), ya que la piedra caliza que entró en la ciudad tenía que entrar por estas puertas. La parte trasera de las torres se abrió para permitir una vista del interior. Fue la cárcel de mujeres por un tiempo.