Преподобный Арсений, пришедший на остров в конце XIV века, нашёл это место «пуще дремучего леса ужасом бесовским окруженным». Ночь провёл Арсений в молитве, а под утро совершил крестный ход вокруг камня с иконой Богородицы в руках и окропил его святой водой. По преданию, духи как копоть вышли из камня и, обернувшись черными воронами, улетели прочь к противоположному берегу Ладоги, который стал с той поры именоваться Чертовой бухтой (Sortanlahti). Вместе с бесами, как гласит предание, исчезли и змеи (Коневец — это единственный остров на Ладоге, где нет змей!).