庭園は書院北庭から客殿南庭まで1,000平方メートルの広さをもつ江戸時代初期の造園である。枯山水の古庭園（市名勝指定）は小堀遠州の作庭と伝えられ、境内は苔におおわれて、「東海の苔寺」とも呼ばれる。