Die exponierte Lage der Burgruine, ihre Einzigartigkeit in der Landschaft und ihrer langen Geschichte sind die Grundlagen für viele volkstümliche Legenden:

Die Gräfin von Molins :

Teresa von Molins, aus St Pere Pescador, verliess ihr adliges Leben um sich einer Räuberbande anzuschliessen, und zwar als deren Anführerin. Sie wurde einige Zeit im Kloster von Garriguella gefangengehalten, kehrte aber zurück zu den Räubern, die sich in den Ruinen der Burg von Quermançó versteckten. Schon bald fingen Streit und Eifersüchteleien an und die Gräfin entschloss sich der Situation ein Ende zu machen. In einer Sommernacht 1826 ging sie hinunter in dem Keller mit einer Fackel und entzündete den Rest des Schiesspulvers, das die Franzosen zurückgelassen hatten, und jagte die Burg in die Luft. 
Die Dame von Quermançó :
Man erzählt, dass die Gräfin von Molins, die in der Burg von Quermançó lebte, nichts anderes als Knochenmark ass; diese Sucht brachte sie ins Verderben. Arm und verhungert nahm sie eines Tages ein Stück Brot mit Walnüssen an das ihr ein paar mitleidige Bauern anboten, es schmeckte ihr so köstlich, dass sie aus tiefster Seele rief: "Wenn ich gewusst hätte, dass Brot und Walnüsse so gut schmecken wäre ich noch immer Gräfin von Quermançó."

Die goldene Ziege :

Es ist die Geschichte über eine verzauberte Königin, die eine goldene Ziege an einem unbekannten Ort der Burg vergraben hatte. Es gibt verschiedene Fassungen die erzählen dass die Juden, die in Villa Iudaica (Vilajuïga) wohnten, die goldene Ziege in der Burg vergraben hatten; kurz vor ihrer Vertreibung aus Katalonien. Man sagt auch sie hätten sie verehrt. Aber die am meist verbreitete Geschichte erzählt, dass ein sehr reicher und berühmter maurischer König dort lebte. Er hatte einen sehr grossen Schatz und er liess sich daraus eine goldene Ziege machen. Aber eines Tages musste er aus der Burg fliehen, weil ein christlicher König ihn besiegt hatte; mit Hilfe der Diener trug er sie fort zu Fuss duch geheime Gänge, die die Burg mit dem Meer in Port de la Selva verbanden. Man sagt, dass der König und die goldene Ziege nie wieder aus den Gängen herauskamen.

Das Geheimnis des Heiligen Grals :

Laut einer der vielen Deutungen wäre der Berg von Verdera der Schauplatz einer der Haupthandlungen des Geheimnis des Heiligen Grals. Die Burg von Sant Salvador wäre die Burg von Monsalvat und die Burg von Quermançó die des Zauberers Klingsor von Ungarn, der um jeden Preis im Orden des Heiligen Graals angenommen werden wollte.

Castell de Quermançó