历阳郡，李密的军队开始缓慢地撤退了，李密已经得到了确切消息，隋军占领了江阳仓和江都城。
这个消息令李密陷入绝望之中，他这才意识到自己中了计，萧杜联军不过是个诱饵，他没有忍受住诱惑，中了杨元庆的调虎离山之计。
尽管李密心慌意乱，但他依然不敢慌乱后撤，萧杜联军像一头狼一样紧紧跟随着他，一旦出现慌乱的迹象，就会引发军心不稳，最后导致溃败，现在李密心中还抱有一线希望，夺回江都城和江阳仓。
他之所以从绝望到又有一线希望，是因为他得到另一个情报，隋军的兵力并不多，只有四五万人，如果自己不惜代价猛烈进攻的话，或许就能夺回江都城和江阳仓。
夜幕降临，李密的大军进入了江都郡地界，在一条叫做绫水的小河边扎下了大营，尽管经过了近一天的行军，士兵们都已筋疲力尽，但士兵们难以入睡，三三两两聚在一起，商议着自己的出路。
如果说江阳仓失守，意味着魏军即将面临断粮的危险，那么江都失守，就意味着军心开始不稳.
确实如此，不仅是普通士卒的家眷在江都城内，而且绝大部分将领的家都是安在江都城，江都失守失守就意味着他们的妻儿落入隋军之手。
随着消息迅速传播，几乎所有的士兵都知道了江都失守之事，顿时人心惶惶，军心开始严重动摇，从扎营开始，军队便开始出现了逃兵，由数十人变成数百人，甚至数千人开始逃亡。
逃兵的出现令李密极为震怒，他命单雄信为军法官，率三千军执利斧巡逻。‘但凡逃亡者，抓住即斩。’
大帐内，李密背着手焦急地来回踱步，他刚刚接到消息。萧杜联军在距离他五十里外的赤松岗出现了，一直阴魂不散地跟着他们，这让他极为担心一件事，如果隋军和萧杜联军形成了对他大的前后夹攻之势，那他就真的危险了。
一方面是军心涣散，另一方面是前后夹击的威胁，内忧和外患令李密心中如千万根丝线绞在一起。愁得他不知该如何是好。
这时，帐门口传来谋士房玄藻的声音，“陛下，微臣可以进来吗？”
李密心中对房玄藻颇有怨念，作为谋士，他没有能看透杨元庆的布局，鼓动自己西征，这就是一种失职。但李密此时心中六神无主，他也想听一听建议，便忍住气道：“进来吧！”
房玄藻走了进来。他心中也十分羞惭，他确实没有能看出杨元庆出兵江南的企图，几乎所有人都认为，杨元庆会先攻关中，