もとは尼僧によって建てられた白滝寺。江戸時代の元禄年間に観音堂となったが、観音堂は明治初期に焼失した。観音像は常林寺に移されたが、1950年（昭和25年）には現在地に新たに観音堂が建てられた。