法華寺正殿據說是高山城第三代城主金森重頼，因為憐憫從九州流放到此地而亡的加藤光正之靈，而在西元1632年將城內的建築物移建至此。

而位於法華寺正殿旁邊，穿過架設於寬闊庭池上方的石製太鼓橋，走上階梯之後，正面就是番神堂的建築物。這座番神堂是歇山式屋頂建築，正面有唐破風的裝飾。內部是縱深一間的上段平台設有五連的佛龛，祭祀庚申神、稻荷（五穀神）、釋迦牟尼佛、鬼子母神、加藤清正像等。這應該與安永6年（西元1777年）上樑的祈禱殿有關。此外據記錄，享和2年（西元1802年）於堂內供奉五位神祇，因此這五尊像應該是法華的守護五神。

法華寺番神堂被指定為高山市的文化財產，其值得一看的地方是力道強勁又極具氣勢的虹樑雕刻，以及上方的龍形雕刻等。