因为戏志才及时识破匈奴联军的计策，平阳郡劫掠的物资未能足量运回。在分赃的时候南、北匈奴就起了争执，为了不使南北匈奴联盟破裂，在南匈奴虞国师极力周旋下，北匈奴分去了大头，引起了南匈奴这边极为不满。
两边主力都还未撤回大本营，一是稍微休整下，二是看看是否还有其他入境劫掠的机会。
东汉初年，匈奴还是汉朝北境的大游牧王朝，但是随着其他少数民族乌桓、鲜卑、羌族的崛起，他们的势力也衰落不少。现在北匈奴有精骑5万，这次出动4万人，南匈奴有精骑25万人，这次出动15万人，整体的势力衰落也是他们选择联合的原因。
现在有金琳琳这个内线配合，戏志才可不打算让这两拨匈奴人回到草原。
按照戏志才的部署，张辽统御两万精骑和一万步兵西出雁门关，屯军朔方地区的清水河县城，直逼南、北匈奴屯兵地区，陈宫则带领两万兵卒坐镇北境雁门关一带，以为后援。
张辽的主动出击，激怒了匈奴联军，想占着人数优势直接吞了张辽部众。但是游牧骑兵优势是骑术和射箭，并不擅长攻城。清水河县城虽是个小县城，张辽据城而守，配合所带守城器械，十天过去，匈奴联军损失数千人，依然奈何不了，在虞国师建议下，匈奴联军转而围城等其断粮。
围城之际，南匈奴单于于扶罗收到金琳琳传回的第一份情报，吕布率领两万精骑并未回师洛阳，已兵到西河郡，预备从西河郡渡过黄河，奔袭南匈奴大本营伊金霍洛旗（现在的鄂尔多斯）。此刻南匈奴大本营只有一万精骑和数万部众家眷，整体迁徙已经来不及。而且吕布在并州时候，就与匈奴征战多年，素有威名。
于扶罗决议撤军回援，聚拢25万精骑足以拖住吕布，而西河郡道路狭窄，运粮不便，只要抵挡拖延半月，吕布自会因为军粮短缺而撤离，本部家眷、粮草也就能得以保全。若大本营被吕布偷袭，家眷、粮草被毁，那他们南匈奴也再无生存之力。
南匈奴撤军之际，虞国师一直苦劝北匈奴共同撤兵，但是却换来北匈奴的嘲笑和奚落。北匈奴自恃有四万精骑在，眼看再围困半月张辽部就要断粮，他们断不肯离开。虞国师无奈只能随军撤离，但是心中终有不安。半个多月前在平阳郡与