在有5座像剑一样从平地刺向天空的巨峰的五剑山（海拔375m）的八合目处（注：日本人将山从山脚到山顶分为十等分，每分为一合，八合目即从山脚起的第八个等分的高度处），坐落着四国八十八所灵场的第八十五号札所——八栗寺。
五剑山过去是有五座山峰的，但宝永三年（公元1706年）发生大地震，东部的一座山峰从半山腰处崩塌，由此形成了现在的模样。
天长六年（公元829年），弘法大师登上五剑山修行能获得惊人记忆力的求问持法，此时突然有五柄利剑从天而降，五剑山的镇守藏王权现（注：“权现”为日本神的神号之一，根据日本神佛调和的观念，佛以神的形态出现便称为“权现”）现身，告诉弘法大师“此山将成为与佛教相符的灵地”。于是弘法大师便将五柄利剑埋于山中镇守，并雕刻了大日如来像，将这座山命名为五剑山。
　由于从八栗山的山顶能够眺望到四周的八个藩国，所以八栗寺最初也被称为“八国寺”。延历年间，弘法大师空海在赴唐留学前曾再次登上此山，为了占卜入唐求法能否成功而种下了8颗烧栗，归国之时正逢烧栗生根发芽，于是将寺院改名为“八栗寺”。自古以来五剑山便是修验道（注：指在山中严修苦行）的中心，至今山上还有供奉赞岐三大天狗之一中将坊的中将坊堂。