霊泉寺は1484年（文明16年）越前守護の斯波義敏によって、斯波氏の菩提寺として開基されたと伝えられています。
霊泉寺には漫画「日本昔ばなし」の「題名：子育てのいずみ」のもとになったお話があります。かつて本堂の南西に泉ケ池という池があり、その昔甘酒が湧き出て、この池の水を飲んだ子供はすくすくと育ったそうで、「活泉（いくいずみ）」とも言われていました。池泉町という町名はこの活泉（いくいずみ）から由来しています。
その縁起を偲んで、子供を授け妊娠期の安定・安産、子供の成長を守護する観音様「子育て観音」とも呼ばれている慈母観音菩薩を建立し、六地蔵尊の真ん中に本尊子育て地蔵尊が祀られています。
このような伝説をもとに「池泉金剛大明神」として信仰を集め、子育て・育児にご利益があるお寺として親しまれています。