末元初，聚景园成为“散景园”其南侧地带，被随蒙元铁骑南下而迁居杭州的回民择为墓地；其中段之地，荒芜淤塞成为一片七零八落的沼泽水塘，其北部地段原有的灵芝寺，显应观等显赫堂皇的寺庙，也随园景一起难逃厄运。到明代中叶，当年蔚然大观的柳浪闻莺胜景，只剩下柳浪桥，华光亭两处破旧陈迹。清初，更是一派凄凉景象，紫珊老人钱塘诗人徐逢吉少年游词的上半阙专写地盛况不再的情景：“蛇蟠眢井，狐窜破冢，辇路已全荒。燕子飞来，桃花不语，阅过几沧桑。”
到一九四九年，柳浪闻莺仅存景名碑，石碑坊，石亭子和沙朴老树各一，表忠观钱王祠旧屋一区以及祠前方塘两口。附近居民干脆称那里为坟山窠。今日柳浪闻莺，经过近四十多年不断的开发和建设，由当年帝王享受的御花园，演变为普通老百姓的大乐园。她仍以青翠柳色和婉啭莺鸣作为公园景观基调，在沿湖长达千米的堤岸上和园路主干道路沿途载种垂柳及狮柳，醉柳，浣沙柳等特色柳树。在园中部主景区辟闻莺馆，又在距闻莺馆不远处置巨型网笼“百鸟天堂”营造烟花三月，柳丝飘舞，莺声清丽的氛围。闻莺馆东面，以草坪和密林带为主形成友谊园景区，引种了一批倭国樱花，草坪北侧铺石砌台，矗立着“日中不再战纪念碑