飞英塔自古即为湖州标志性建筑之一，其独特的“塔里塔”造型为海内罕见，也是湖州“三绝古建筑”之一。

该塔始建于唐代，北宋又建木塔罩护，形成“塔里塔”。根据建外塔缘由，取佛家语“舍利飞轮，英光普照”中之二字为塔名，名为“飞英塔”，上乘寺也易名为“飞英寺”。

1150年，塔遭雷击而焚于火，旋即重修，外塔亦于南宋端平初(1234)“葺而新之”。元、明、清三代多次修缮。1929年，因年久失修，致塔顶倒塌。1986年底重修维修。

飞英塔内石塔，8面5层，下设须弥座，残高14.55米。系太湖石雕刻砌叠而成，雕刻仰莲、覆缠枝花卉。束腰八边雕狮子群像。第四层正北面为观音像。塔身各面均辟壶门状佛龛，内雕大幅佛造像。

飞英塔外塔，7层8面，通高55米。副阶宽敞明亮，塔体收分自然。其中最具宋代建筑风格的是平伸舒展的翼角，简洁朴实的檐面，硕大的斗拱和寻杖望柱式栏杆。因内含石塔，使外塔构造奇特，4层以下中空，上3层统设楼面，6层底架设十字交叉的千斤梁，悬挑27米高的塔心柱。沿塔壁挑出各层平座和楼梯，拾级登临，盘旋而卜，内可饱览石塔精华，外可俯瞰湖城风光。