Goa ini dinamakan Goa Rahayu karena diyakini bahwa goa ini pernah digunakan sebagai sarana penyelamat Raden Danang Suta Wijaya dalam menaklukan alas Mentaok yang terkenal angker dan sulit untuk ditempati manusia.