却说刘贤沿山道逶迤而行，来到帜县时，严颜早已弃了县城，撤军往上游去了。周瑜留兵守卫帜县，也自水陆并进，追击而去。
帜县守军见刘贤到来，闭门不纳，只叫刘贤在城外驻扎。魏延大怒，便欲攻城，刘贤笑着安慰道：“无妨，我观此城被周瑜用投石机攻击，城墙已然大坏，若是攻打，自然容易夺取。但如此一来，岂不是与周瑜反目成仇？既然人家不要我们进城，那也罢了，我们也不西进，干脆转道南下去取涪陵算了。”
魏延闻言大喜，道：“早该如此！”
当下刘贤命令士兵砍伐树木，建造小舟、木排，准备渡江南下去取涪陵。次日，舟船尚未建造完毕，早有周瑜书信从上游送来，刘贤拆开一看，只见周瑜在信中不断赔礼道歉，表示要严惩帜县守将，请刘贤切莫生气等等。末了，话风一转，道：“如今已进兵近两月，驻守鱼腹的大军接收了后续钱粮，开始陆续进发。眼下已有潘章率军三千西进，我已传令叫他南夺涪陵。请刘将军接信之后，速领兵前来，与我会合。”
刘贤看完书信，沉默不语。当下就收住大军，驻扎在帜县城外，也不进兵，也不南下。
且说周瑜领兵水陆并进追击严颜，自以为有水军精锐，进兵便捷，心下并不以严颜为意，只在闻听刘贤击破孟达营寨，收降了三千川军之后，心下才颇有些忧虑。转而对吕蒙道：“刘贤此人，甚难压制。只要一有机会，他便能迅速壮大，看来今后不能再放任他自主出兵了。”
吕蒙道：“但他如今驻兵帜县之外，不来与我会合，如之奈何？”
周瑜笑道：“无妨，他现在兵马不少，若真的前来，我还担心他对我不利。就让他暂时驻扎在帜县吧，等我取了江州，全据巴郡，再来理会他。”
于是周瑜专心追击严颜。
这日，行到长寿乡地界，周瑜闻听前方探子来报：“严颜在前面当道扎营，阻住去路。”
周瑜讶道：“严颜一路溃逃，如何又敢在这里立寨堵截我？”
当下率领众将前往查看，只见严颜在山道之上筑起营垒，将道路堵得严严实实，周瑜看了看地势，着实险要，易守难攻。于是转头对吕蒙道：“严颜再次堵截，难道不怕我乘船绕过去，趁虚袭击江州？”
吕蒙也百思不得其解，道：“或许是别处有援军到达，江州已经有兵守卫了，也不一定。”
周瑜点头道：“应是如此！严颜虽有兵万余，但这里山道狭窄，大军根本施展不开，我欲留一支兵马在此，也深沟高垒堵住道路，防止他复去夺帜县。我却率领大军乘船绕过去，径直去取江州。看他严颜会不会回援！”
计议完毕，因天色渐晚，周瑜决定暂时扎营休息，待明日再进兵。