霍峻擅守，利用蛮人与汉军在城外野战的时间，他将零陵打造的如同铁桶一般。当麾下蛮人拒绝出城与汉军交战以后，霍峻也没有强迫那些蛮人，只是开始专心守城。只要守住零陵不失，汉军就不敢深入，而事实也正如霍峻所料的那样，严颜率领汉军陈兵零陵城下，既没有分兵也没有强攻，反而与城中的霍峻展开了对峙。
早就知晓汉军攻城手段犀利的霍峻此时反倒有些纳闷了。汉军的沉默反而让他浮想联翩，担心这会不会又是汉军的阴谋诡计。为了摸清汉军的意图，霍峻命沙摩柯趁夜出城，试探汉军的反应，结果沙摩柯去了，差点就没回来。
原本沙摩柯就有伤在身，经过这数月的休养已经好的差不多了，结果这一次出城回来，旧伤复不说还添新伤，他也就更有理由拒绝霍峻的命令了。
根据沙摩柯的讲述，他是出城不久就遭遇了汉军的伏击，仿佛汉军事先已经知道他要出城似的，而这回打伤沙摩柯的人不是旁人，正是当初在益南击伤沙摩柯的兀突骨。兀骨突的武艺可说是南蛮人中的第一，作为昔日的乌戈国国主，不仅仅是拥有藤甲军，他自身的武艺也是可圈可点。沙摩柯虽然也是五溪蛮中的第一勇士，要是对上王平、马忠或许还能略占上风，但碰上了兀突骨，那就只有挨揍的份了。
对兀突骨，沙摩柯是恨之入骨。当初就叫兀突骨打伤了左腿，不仅走路困难，甚至连夜生活都受到了影响。好不容易等到左腿的伤势好的差不多了，幸福的夜生活又可以开始了，没想到这回不仅左腿受伤，右腿也受了伤，沙摩柯在接下来的日子里，估计要跟拐杖做一阵子形影不离的好朋友。
听完了沙摩柯的讲述，霍峻有些失望，他派沙摩柯出城的目的是弄清楚城外汉军的意图，到底是准备强攻还是围困。可沙摩柯这个不争气的出城没多久就遇到了埋伏，连汉军大营的边都没摸着。唯一的收获就是零陵城中可能有汉军的细作，并且能够及时向城外传递消息，否则汉军怎么会如此迅准确的伏击到沙摩柯。
眼下沙摩柯是不能出战了，其他蛮王也一个个学精了，不管霍峻开出多高的价码也是把头摇得跟拨浪鼓一样。而霍峻又不能强逼这些手中有兵的蛮王，万一逼急了这些蛮王可不管什么君臣大义，聚众作乱对他们来讲几乎就是家常便饭。无奈之下霍峻只能一面让人严防死守一面暗中派人监视城中，寻找汉军细作。
城外汉军大营，严颜望着零陵高大的城墙，有些懊恼的自言自语道：“失算了，失算了。”一旁的王平倒是理解严颜此时的心情，这次出兵还是急躁了一些，再加上山路难行，并不利于运输攻城器械，所以此番出兵军中并没有携带什么攻城车、云梯之类的大型器械。等到刘备军龟缩城中不再与汉军在城外交战以后，严颜才意识到当初没把擅长制造攻城器械的工匠一并带来是多么的失策。
汉军不马上攻城，原因并没有霍峻想的那么复杂，主要原因就是严颜并不想为了攻取零陵而付出不必要的代价。城外的树木随处可见，想要制造简易版的云梯也不是什么难事，但仅凭简易云梯攻城，那伤亡势必也会很大。眼下严颜已经急调军中工匠，但在攻城器械到位之前，严颜除了等待还是等待。
分兵？严颜是不打算干的。之前汉军的确是分了兵，八万人分作四路扫荡城外的蛮人部落，但如今蛮人也学精了，都躲到了城里，那汉军继续分兵也就没了意义。找不到对手，分开了除了拉拢不便，也没什么好处。
“老将军不必唉声叹气，这事并不是你一人的疏忽。当初军议的时候，我们大家也是同意的。”王平出声劝严颜道。
“唉~子均，我倒不是担心会因为这个疏忽给老夫带来什么影响，而是担心我们这里进展缓慢，会不会影响到圣上那里的大局。蒙圣上信任，命老夫为此次主将，若是因为老夫这里出了岔子而导致圣上那里战事不顺，老夫又有何颜面去见圣上？”严颜叹口气道。
“老将军若是为此担心大可不必。原本末将还想要劝老将军放缓攻势呢。”王平闻言笑着说道。
“子均此话何意？”严颜闻言不解的问道。
“老将军，末将之前久在圣上身边，所以对圣上的意图也能猜出个一二。你也知道，此番孙刘联军有意在赤壁与圣上决战，为了争胜，孙刘二人可说是在赤壁集结了大批精锐。”
“这些老夫自是知晓，可子均为何觉得老夫放缓攻势会对圣上有利？”
“老将军，孙刘二人将麾下大部分兵力集结赤壁，那就意味着他们在其他地方的防守薄弱了下来。这的确有利于我军作为，但同样也容易让孙刘二人意识到兵力大规模集结的不妥。孙刘联军集结于赤壁，这对我军来说虽是块硬骨头，但同样也是可以一劳永逸的机会。只要能够在赤壁全歼或是歼灭大部分孙刘联军，那接下来对孙刘的清剿也会变得容易许多，对彻底结束南方的战乱局面也有帮助。”王平闻言解释道。
严颜听后微微点头，的确就如王平所言，孙刘二人是茅坑里的石头又臭又硬，指望他们良心现主动向朝廷投降几乎就是痴心妄想，唯有将其逼入山穷水尽的地步方