德祐二年（1276）元宰相伯颜占领临安，赵与芮降封平原郡公，成了没落的贵族。他的王府破败过程虽不见记载，但据绍兴宋六陵在元初的遭遇便可推想。至乔吉游览时又隔数十年，王府已成为一片荆棘瓦砾。因此作者生出无限感慨，作此小令以感叹兴亡盛衰之无常。