古来、牛馬の守護仏として信仰を集めている。井上雨成の歌碑が建ち、近くには柴田勝政（柴田勝家の嗣子）の墓所もある。薬師堂の境内一帯は桜の名所、端四国第一番の札所。