西尾城下の鬼門の方向にあたり、天王門の脇を固める神社である。古くは伊文山牛頭天王社と呼ばれていた。
西尾の郷社で、歴代西尾城主をはじめ、一般町人の信仰が厚く、江戸時代には18石5斗の朱印地を与えられていた。境内の東と北の崖は西尾城の外堀のあったところである。今は駐車場等になっているが、昭和30年頃までは蓮池で往時をしのばせていた。