餘之軍攻下此蓋牟城。高句麗人善於守城是有名的，而且遼東本身就多是石城，山城，比之中原在平原上所築的夯土城池，防禦上要更勝數籌。隋軍第二度徵遼，攻打遼東城，楊廣以三十萬大軍於遼東城攻城一個半月，傷亡慘重仍是不下。

後世謂武功之盛無人可及的李世民，征討高句麗時，也是在安市城下受挫，不得不退兵。

楊林甫坐在地上，頹然仰頭望天，想起自己這官場數十年浮沉，不由苦笑。當初徵遼時，他雖是中年卻意氣奮發，大有建功立業之志，於仲文帳下參贊軍機。後半途患病，沒有隨謀主於仲文，於三十大軍一併東征平壤。

軍糧不足，後勤輾轉艱難，隋軍連戰連捷，軍士卻人人皆有飢色，待大軍已抵至平壤不足三十里，敵軍大將乙支文德詐降言若是返軍，則將高元送往東都朝見楊廣。但當隋軍回師時，乙支文德卻在薩水驟襲隋軍後衛……

楊林甫當時身在病中，聽聞三十萬人最後自有兩千七百人返回後，忍不住仰天大嚎，幾乎泣血，因為他的三個兒子，當時也在軍中。師敗之後於他有知遇之恩的於仲文，被朝廷眾臣們指責為徵遼之敗的替罪羊後，氣病而死。楊廣二度徵遼時，楊林甫本以為可矢志復仇，沒想到楊玄感謀反，半途而廢。第三度徵遼，又因為各地民亂，不得不取消。

楊林甫遂心灰意懶，但天子念其操勞，又拔他為遼西郡作一任太守，結果羅藝謀反，而今他重回遼東故地，沿著當年三十萬大軍徵遼的之路前進