赤い幟旗に彩られた数十の鳥居をくぐり、階段を登りつめると社殿がある。社伝によると、源頼朝が伊豆に流されていたとき夢のお告げで旗挙げを促した「かくれ里の稲荷」を佐助稲荷と名付け祀ったという。