光绪十七年《肥城县志》卷二《古迹志》载：“香严寺，在城西三十里西礼村（今桃园镇西里村），有元延祐五年陈德昌书继踵香严院记。又有正德九年、十五年、万历二年重修各碑。”
香严寺位于西里村前街西侧的西里村小学内，因早年建学校，寺院被拆除。后因合点并校，今校园已荒废。余少时因父亲在此教学，曾在此居住达七年。村里人习惯称之为“大庙”。2009年6月，文物普查时我曾故地重游，在院门口发现了一通重修碑碑帽，镂雕双龙戏珠纹，碑帽高、宽均为1米多，体积较大，从碑帽的大小估计，此碑应该会很高大。因当时部分字埋在土中，未及细细考证。今日拿出照片细细查看，发现碑帽上的字为“重修香严寺记”。另在院内发现了一件墓塔构件，石质，鼓形。上面篆刻“胥公化主塔铭”，下刻小字“住持香严院小师，妙信、妙还、妙晕立石；至元二十四年八月四日”。院内还散落有大量柱础、断裂的石柱等建筑遗迹。从遗留的石刻文字分析，此处应该就是县志上所记载的香严寺无疑。
