この地にまつわる最も有名な逸話の一つが、水戸黄門として知られる義公・徳川光寀にまつわる伝承だ。噂の真偽を確かめるべく自ら竹藪に足を踏み入れようとした光寀は、途端に方向感覚を失い、不可解な怪異の連続に遭遇したという。白髪の老人に導かれて命からがら脱出した光寀は、「ここは神域であり、庶民が妄りに立ち入るべきではない」と強く戒め、自らも禁足地としての誓いを立てたと伝えられている。
また、歴史の闇に散った英雄・平将門との関わりを指摘する説も深い根を持つ。承平・天慶の乱で敗れた将門の陣営跡、あるいは彼の影武者や家臣たちの遺体が密かに埋葬された場所であり、将門の怨念が残存しているがゆえに入り込む者の精神を狂わせるのだという歴史的な背景も囁かれてきた。