观音阁位于市区小南门原轧花厂东侧。原有一古庙,建于宋以前,庙门上嵌有“香林古刹”石刻匾额。该庙堂多次兴废易名,古名“香林寺”,后改“香林庵”。庙门上的石刻对联云:“香篆氤氲浮梵寺,林花葱郁护禅关”,就是庙名的题咏。清雍正五年(1722)年知县沈嘉征主持重修此庙,即改名观音阁。解放后,特别是破“四旧”的年代,该庙僧尼被驱赶,庙宇倒塌,香火中断,近几年来,在市内宗教界人士和信徒的努力下,自筹资金数万元,重修了此庙,一度沉落的观音阁,依旧烟雾燎绕,佛钟声声,大有昔日“梵寺钟声”的遗风。