汉十一年卢绾见淮阴侯韩信和梁王彭越都被诛灭，心中惶恐又因受部下蛊惑同代王陈豨发起叛乱。这让刘邦心痛不已，与大臣誓曰：非刘而王者，若无功而侯者，天下共诛之。”卢绾本人曾欲前往长安请罪，但到长城时刘邦就病逝了，他被迫携家属逃往匈奴。汉景帝中元六年，卢绾的孙子卢他之归汉，被封为亚谷侯。
