Au début, cette structure était un sanctuaire dédiéé à la déesse de la fertilité qui a assumé, au fil des siècles et des peuples, des noms différents.
À l'époque romaine, il était destiné au culte de Vénus Erycina et abritait les prêtresses qui pratiquaient la prostitution sacrée. Au fil du temps, il a changé de nom et de fonction.
Pour la reconstruction médiévale de la forteresse, par les Normands (sec.XII) on a également utilisé des fragments de l'ancien sanctuaire et du temple de l'époque romaine.
La forteresse devint "place royale" pour les vice-rois aragonais jusqu'au 16ème siècle. Avec les Bourbons, il est devenu une prison.
Dans les premières décennies du dix-neuvième siècle, il est passé à la Commune qui à la fin du siècle l'a donné en concession au comte Agostino Pepoli en échange d'une restauration.
Des fouilles archéologiques ont été effectuées à la recherche du temple par l'archéologue Cultrera en 1934-36.