禅長寺は、大同二年（807）弘法大師により修法の道場として創建されました。
その後、源頼性の遺髪を携えたあやめ御前が名を西名と改め入山し、菩薩供養しながら生涯を閉じました。
以後、禅長寺は源氏の祈願所となりました。

江戸時代には十五石の御朱印寺として栄え、仏殿は、高崎城主、松平輝貞建立によるものです。