邓禹回答说：“陛下，臣认为卢芳固然可恨，收拾他也是早晚的事情，但是却不急于一时，当下之计还是应该以恢复国力为主。如果站在国家统一的角度来看，的确是要剿灭卢芳，可站在国家安定的角度上来看，此事宜缓不宜急。卢芳之害，不过局部数城，此番他攻占我朝两城，不过是趁着我们临阵换帅的空当，虽然刘歆的统兵能力不如杜茂，可在刘歆梳理好一切以后，卢芳也未必能占到便宜。可如果我们主动进攻卢芳，必定会大损国力，我们如今的税收综合来看大约是在十税一，虽然比新莽时期要好了很多，但是老百姓的日子过的依然是水深火热，此时如果再行兵戈，臣害怕会再发生大规模暴乱。到那个时候，就不单单是数城之间的祸事了。”

刘秀思索片刻后说：“仲华说的很对，看来这事咱们还得好好的议一下，那卢芳怎么处理，放着他不管吗？虽然不至于养虎为患，但终究是个囊肿，让朕不得不时时的想着他。”

吴汉说：“既然陛下不准备剿灭卢芳，臣建议把边民内迁，施行坚壁清野之策。我们就留孤零零的几座城在卢芳周围，让他没东西可打。他若攻城，那必然损失惨重，他若不攻城，想绕过我们的边城进攻腹地，那我们就可以偷袭他的粮道，断他的后路。待到我们国力恢复，再兴兵讨伐。”

刘秀听完点点头说：“朕认为大司马这个方案可行，你们看呢？”

众臣皆附议。

随后刘秀让吴汉带领一万部队北上，接管刘歆的部队，并安排边民内迁，坚壁清野之事。

又令窦融找一些贫困郡县，试施行十五税一的方案，待到国力恢复一些后全国施行，以减轻百姓负担。

吴汉北上以后，将和卢芳接壤的百里内的百姓全部迁至内地，并将一切能被卢芳利用的物资搬入城中。

卢芳由于投靠了匈奴，需要连年向匈奴进贡，可他那弹丸之地，又哪里有那么多物产可以进贡呢？

自从刘秀消灭了隗嚣，令杜茂北上防御以后，卢芳就很少能从边境劫掠到物资。如今又到了进贡的日子，卢芳不得已再次袭扰汉朝边境。

可边境线早已经被吴汉清空了，卢芳转战多地，都没有丝毫收获。

卢芳不得已，令大将随昱镇守安定（今宁夏回族自治区固原市境内），自带大军五万攻打右扶风（今陕西省宝鸡市、西安市西部及咸阳市西部地区）。

吴汉在西线多年，对右扶风极为熟悉，再加上吴汉极高的指挥才能，将卢芳打的大败而归。

随昱看卢芳被汉军击败，认为卢芳是以卵击石，劝说卢芳向刘秀投降，可卢芳却不忍自己十余年的努力付之东流，断然拒绝。

随昱看卢芳心如磐石，便暗中调动兵马欲擒获卢芳献给刘秀。

就在动手前夕，被卢芳得知了消息，卢芳欲调兵平叛，怎奈城中的将领都被随昱偷偷换成了自己的心腹。卢芳大惊，不敢有丝毫犹豫，带领百余骑冲出城门，逃往北边匈奴王庭，寻求匈奴庇护。

随昱得知卢芳跑了，也不去追，向吴汉献城投降。

刘秀得知后，十分高兴，封随昱为五原太守，镌胡亭侯，食邑五原两千户（今内蒙古自治区包头市境内）。

刘秀遣使携带重金入匈奴，向匈奴单于购买卢芳首级。由于卢芳投靠匈奴十余年，且每年都向匈奴进贡，关系处的十分要好，匈奴单于不忍杀害卢芳。可匈奴单于看着刘秀送来的金银珠宝又十分眼馋，于是将卢芳驱逐出境。

卢芳犹如丧家之犬，于乡村之间东躲西藏。