La leggenda più famosa del castello è quella del gioco dei birilli d'oro. Un giorno, alcuni giovani pastori che stavano pascolando le loro capre vicino al castello entrarono curiosamente nelle rovine. Lì trovarono una porta di ferro arrugginita e nascosta che si aprì dopo un po'. Durante la loro ricerca, i ragazzini si imbatterono in un lungo corridoio buio, che seguirono. Incuriositi, strisciarono all'interno e si imbatterono in una camera. Nella camera scoprirono un set di birilli d'oro che vollero subito portare con sé. Ma non appena iniziarono a portare fuori i birilli d'oro, la terra tremò e le pareti si spaccarono. Per la paura, i ragazzi lasciarono cadere i birilli e corsero via in preda al panico, ma non riuscirono a trovare l'uscita. Solo il mattino seguente, quando si sentirono le campane di San Paolo suonare, le porte di ferro si aprirono e i ragazzi riuscirono a fuggire. Da allora, i birilli d'oro non sono più stati visti.