むかし、引田村（現在の大宮町若林）に、吾兵衛という働き者の若者がおりました。前日からの雨が上がり、天気も良いので、吾兵衛は牛を引いて長田の山に出かけました。
牛の背に薪を積んで帰る途中のこと、難所と言われる広見ヶ入の峠で、牛がぬかるみに足を取られ、谷底に転げ落ちてしまいました。吾兵衛もあわてて谷底に駆け下りると、牛の名を大声で呼びながら必死で体をさすったのですが、牛はぐったりとしたまま動かないのです。途方に暮れた吾兵衛が、ふと見上げると、峠道を行く旅のお坊さんの姿が目に入りました。
「お坊さま、助けてください。」そう叫ぶと、お坊さんは谷底まで下りて来てくれました。吾兵衛から、この峠では雨が降るたびにこんなことが起こると聞いたお坊さんは、「これからこのようなことが無いよう、私がまじないをして差し上げよう。」と言いました。そして、「この牛は、これから神となってこの峠を通る牛や馬を守ってくれるだろう。」と言うと、呪文を唱え、錫杖を牛の体にそっと当てました。
すると、不思議なことに、牛は石になってしまったのです。「お坊さま、どうして私の大事な牛を石に…。」吾兵衛は、悲しそうにその前に立ち尽しておりました。しばらくすると、お坊さんはどこからか丈夫そうな牛を連れて現われ、「お前の牛は、この峠を通る牛や馬の守り神になったのだよ。代わりにこの牛を連れて行きなさい。」と言うと姿を消してしまったのです。
この話は村中に広まり、いつしか、その旅の僧は弘法大師に違いないと噂されるようになりました。やがて、その石は「弘法の牛石」と呼ばれるようになったのだそうです。