嘉兴三塔，面河背城，旧时舟子遥见三塔，遂谨慎行驶，塔实起航标作用。每逢农历三月十六日，有踏白船等汉族传统民俗文化活动。三塔均为九层砖塔，中间一座稍高，约15米，塔内无梯可攀，每层壁嵌铁制浮雕佛像，饰白、黑、红三色。据《嘉禾志》记载：此处有白龙潭．水深流急，行舟过此多沉溺，人们推测“潭中有白龙兴风作浪，于是运土填潭，建三塔以镇之。”唐季僧行云，运土填潭．建塔三座以“镇潭中白龙”。

弘治十五年八月，王阳明从京师回乡养病时路过嘉兴，遂游历三塔寺，写有诗作《赠芳上人归三塔》。