La leggenda narra che questa sia la casa di una sirena che per un amore maledetto accettò di sedurre i marinai per condurli ad un sonno profondo e condurli, poi, nella bocca di un demone marino di cui ella era perdutamente innamorata.

Le Due Sorelle, a Sirolo, prende il nome da questa leggenda. Secondo la tradizione, una sirena era solita apparire ai marinai e li incantava con il suo canto fino ad attirarli all’interno della Grotta degli Schiavi e imprigionarli per sempre. 

La stessa leggenda vuole che ad aiutare la sirena ci fosse un demone marino che venne trasformato dagli dei in uno scoglio e spezzato in due parti. Il nome però deriva anche dalla forma degli scogli in questione, che ricordano due suore inginocchiate in preghiera,