将近持续了两个时辰，唐军依然被阻在护城河边，几乎没有丝毫进展，反倒折了不少兵马。这令李世民气恼不已，却又无计可施，不知如何是好。正在这时，长孙无忌开口劝谏皇上下令撤兵，他以为若不能解决护城河这个大问题，就是全军突破箭矢和炮石，也无法到达城墙下，更别说攻城了。李世民听后，思忖了半晌，寻到一计，那就是趁夜黑时令军在护城河上偷偷搭建浮桥，天亮后再率军过河攻城，如此必可取城也。想到这儿，他心头一喜，便下达撤军的命令。于是，李世勣、李道宗、薛万彻、程名振等将领奉命撤至两里之外。时值晌午，唐军将士起锅造饭，就地歇息。
李世民顾不上休息一下，当下就把李世勣、李道宗等将领招到面前，向他们当面授计，命令他们从不远处的山林中伐取木材，三更时分偷偷前往护城河搭建浮桥，天亮时引兵攻城。李世勣、李道宗他们以为皇上此计绝妙，欣然领命而去。天黑时，那些士兵将所需木材准备好了，只等命令前去搭桥。三更一到，李世勣、李道宗各引一千士兵背负着木材绳索，摸黑偷偷地向护城河走去。不知怎的，城上的守军好像没发现他们的行动，一切都进展得相当顺利。这是件好事，然而李世勣心里倒是有点莫名的不安，觉得好像有什么地方不对劲。待浮桥架好后，他想令兵把守，却又担心到时被城上巡逻兵察觉，从而前功尽弃。因此，他想了想就打消了这个念头，带领原班人马回驻地去，准备接下来的战斗。
唐兵一离开护城河，城上的守军就开始行动起来。他们一个个抓住手中的绳索，踩着墙壁快速往城角下滑去。不一会儿，百余士卒到达地面，转身向浮桥跑过去。他们没有拆桥，只是将一头的撑子取下。不多时，他们就完成了所有任务，高高兴兴地跑向城下，抓住绳索往城上攀爬，很快便全部登上城。
天一亮，李世民率四路大军朝安市城飞驰而去。城上守将金永熙见唐军冲上来，嘴角往上一勾，露出一丝冷笑，然后高声喝令手下放箭发炮石。顿时，箭矢夹着炮石如雨般密集地射向城外唐军。李世民心意已决，压根就不把锋利的箭矢和沉重的石块放在眼里，他用坚定而愤怒的眼光瞥了眼纷飞的箭石，冲着将士们大喝声冲过去攻城。唐军将士得令，挥舞着手中的兵器策马直往前冲。箭石异常密集，唐兵难以抵挡，不少人着箭中石纷纷坠马倒地。然而，他们并没有被可怕的箭石所吓倒，依旧争先恐后地往前冲，前头的倒下后面的紧跟着冲上去。尽管阵中人仰马翻，惨叫声不绝于耳，但英勇的唐军将士仍旧不顾一切地冲上去，完全置生死于不顾。猛冲一阵之后，大部分兵马穿过密集的箭羽飞石，奔向护城河。他们来不及喘口气，就往浮桥上跑过去。
李世民勒马立在高高的坡道上，眼看着部下人马一个个突出箭阵奔向浮桥，心情非常激动，忍不住高声为他们欢呼为他们呐喊。他相信只要他们到达城下，就一定能够攻门登城，夺取眼前这座固若金汤的城池。然而，这份激动喜悦的情绪很快就消失了，随之而来的是惊愕与痛苦。他看见跨在护城河上的浮桥一座接一座地坍塌，兵马纷纷掉进又深又宽的河中，满耳都是咚咚的坠落声和被箭石击中的惨号。望着眼前这幕情景，他整个人都像遭电击似的瞠目结舌，呆若木鸡。他简直不敢相信这一切会是真的，那么结实的大桥怎么会突然塌下去，这一切到底是怎么回事？他感到迷惑的同时，也感到无比恼怒。
比李世民更震惊更困惑的还有李世勣，此刻他已经策马奔到了护城河边，正准备过桥，谁知率先跑到桥中央的人马随着桥身坍塌纷纷掉进水里。他吓了一大跳，勒住马呆立在那儿，眼睁睁地看着部下将士在冷冰冰的水里痛苦地挣扎着，很快就被箭射死被炮石砸得头破血流，然后悲惨地叫喊着沉入深水中，河面渐渐泛红，血水中漂起了尸体。面对这一切，他内心痛苦不堪，同时也想不通那么结实的桥身怎么会塌掉，这到底是怎么回事？就在他百思不解之际，城上忽然传来一片嘲弄声，说浮桥的一边的支柱连夜被他们拆掉。听了这番刺耳的话，李世勣才恍然大悟过来，气得直扯开喉咙怒骂不止。
然而，辱骂决不是战斗。李世勣明白这骂除了泄愤之外，对这场关键之战毫无用处。作为主帅，他必须尽快想办法解决面前的问题。他知道浮桥已断，想率军冲到城墙下已是不可能，唯一可做的就是令军后撤，免受更大的伤亡。这么一想，他便带着一种无奈向部下人马宣布撤退。唐兵接到主帅的命令，尽管很不甘心，却也知留在这儿只是白白送死，倒不如留得性命他日再战。于是，他们便纷纷掉转头往回跑，不少人不幸中箭着石而阵亡。
这时候，李道宗、程名振、薛万彻三路兵马见浮桥坍塌，无法通过护城河攻城，只好引兵往后撤。不一会儿，四路兵马重新回到了皇上跟前，一个个垂头丧气，灰头土脸。李世民阴沉张脸，目光忧郁地打量着面前这些衣冠不整、满脸血污的士卒，心里很是难过，却什么也不说。李世勣、李道宗为昨夜搭桥之事跪地向皇上请罪，李世民视这两将为心腹，不想因这事罪责他们，只指出他们所犯过失，然后便将他们一一扶起。接着，他就引军回营。
接下来的几天里，李世勣继续率军攻城，结果都无功而返。这不仅令唐军折了近四万人马，而且严重地挫伤了士气，全军都陷入到一片悲观失望之中。加上很快就要断粮，将士们得面临难捺的饥饿，这又使他们不由自主地陷入到恐慌之中。这一切，李世民全看在眼里急在心头，一时间不知如何是好。一天晚上，他把长孙无忌、李世勣、李道宗等心腹大臣请进御帐中商议对策。众臣心事重重，满脸忧愁，不知该如何是好。默然良久，李世勣开口说道：
“今安市城池坚固，贼军顽强守城，实难攻克。故而，微臣以为不可再强攻，如此非但无济于事，且会加重我军的伤亡，于军不利呀。请皇上三思！”
“李将军言之有理！”李道宗紧跟着说，“我军数次强行进攻，折了不少兵马，而城池依然牢牢在掌控在金永熙手中。再者，高延寿十几万大军距安市城不过八里之遥，一旦识破了尉迟将军之计，必会挥师前来。到时我军必腹背受敌，恐难全身而退。故而，臣以为，为今之计当退走安市，前往乌骨。”
“任城王此计甚好！”李世勣点头赞同道，“乌骨兵马大都调入调往安市，其守军不过五六万，且大都是老弱残兵，难与我军对抗。若皇上愿移师乌骨，再令将军张亮从卑沙城引兵前来，两军合力可一举攻取乌骨城。乌骨乃高句丽屯粮之地，我军便可广收粮草，补充军需，然后渡过鸭绿江，直取平壤。平壤虽为都城，然防守空虚，我军可一鼓作气破城而入，生擒泉盖苏文，活捉国王高藏，灭其国也。臣以为此乃良机，不知皇上以为如何？”
“臣等以为此计绝妙，可一举平定高句丽，请皇上采纳为宜！”还没等皇上回话，薛万彻、契苾何力、程名振等人连忙请求道。
“诸位将军所言不为道理。”沉吟会儿，李世民开口说道，“今久困安市城下，毫无进展，倒不如发兵乌骨，东进平壤为上策。一旦平壤被我军攻破，高藏臣服于朕，安市自当为我大唐疆土，何须如此舍命强攻也。故而，朕欲听取众将之见，明日便发兵乌骨。”
“不可，皇上，万万不可！”长孙无忌反对道，“天子御驾亲征，当与一般将领统兵不同，不可冒险侥幸取胜。今安市有金永熙、高延寿兵马近二十万，且建安尚未给张俭将军攻取，其城中守军不少于六万。皇上移师乌骨，他们必定会出兵断我军后路，如此岂不陷入危亡之中？皇上，请慎而又慎啊！”
“长孙大人所言甚是！”执失思力谨慎地说道，“乌骨虽弱兵可取，然平壤乃为都城不可轻取，最可怕的是安市、建安这近三十万兵马，他们是高句丽的精锐，难以对付。皇上率军入乌骨，进平壤，高延寿、高惠真他们肯定会引大军追袭，到时难免腹背受敌，这该如何是好。臣以为，皇上不可贸然深入。”
“执失将军未免有些多虑了吧！”李道宗嘴角边浮出丝嘲笑，接着又胸有成竹地说道，“只要我军能快速取下平壤，迫使高藏归顺大唐，这二十几万兵马又何足惧哉！”说着，他又拱手对皇上说句，“今我军久困安市城下，若得移师乌骨，直取平壤，必能士气大振。攻取平壤，平定高句丽，指日可待也。”
