而此时又有谏官上言称李纲不成分开朝廷，却被钦宗天子觉得大臣游说之由痛加斥责。此时便有与李纲交好之人前来劝说道：“公可知为何遣公出兵宣抚太原否？此非为边事，乃借此去公罢了，则都城之人将再无话可说。公对峙称病不出，则进谗之人愈烈，圣上何时发怒且不成测，汝之何如？”并且许翰也派人写书而来，李纲拆书便见“杜邮”二字写于纸上，因而大惊失容。
此次救济太原，钦宗天子几近尽起家底，召兵二十万，兵分六路，由李纲率宣抚司兵马，又有解潜、刘韐，折可求、张思正、范琼五部兵马相随。
临行之时，李纲又上书请六路兵马同往太原，由本身统兵合为一处，再行攻打金军，但钦宗恐其势大，是以不准，并号令各路兵马诸将皆受朝廷节制，有事便直接传达，因而李纲的宣抚使徒有节度之名，倒是难以批示众将，所下军令，各部多不顺从。
宋将大败的动静传回朝廷，钦宗天子大惊，令人问责李纲，李纲以众将不听其节制而败，又上书申明节制不专之弊，书中言道：“分路进兵，敌以尽力制吾孤军，不若合大兵由一起进。”而此时朝廷当中主和派又占有上风，力主合议，是以钦宗天子便下诏令李纲停止进兵。
种师中兵败被杀之事传入朝廷，不但没有引发钦宗天子的警悟，反而受一众奸臣勾引，说李纲背信弃义，惹怒金人，又说其不知百姓痛苦，大肆设军，华侈粮饷。而钦宗天子享用了一段时候的安宁糊口，也将金军围城之事放在了一边，便不喜李纲。
李纲接诏上奏道：“太原之围未解，河东之势甚危，秋高马肥，敌必深切，宗社安危，殆未可知。使防秋之师果能足用，不成保无敌骑渡河之警。况臣出使未几，朝廷尽改前诏，所连合之兵，悉罢减之。河北、河东日告危急，未有一人一骑以副其求，何如甫集之兵，又皆散遣？且以军法敕诸路起兵，而以寸纸罢之，臣恐后时有所号令，无复应者。”但这封奏章呈到朝廷，倒是再无回应。
许翰写“杜邮”二字便是警省李纲，莫再成了秦朝武安君，平生为国，却因病不出而为君王不喜，又受奸人教唆，妄自送了性命。因而李纲无法，只得受命宣抚使，领军救济太原。
随后诏谕命李纲回京，以后钦宗天子授任李纲为观文殿学士、扬州知州，李纲此时已经心灰意冷，因而上奏要求去官，不准。但随后不久，钦宗天子便听信谗言，以其“专主战议，丧师费财”为由，将其贬为提举亳州明道宫，责授保静军节度副使，在建昌军安设；后又贬谪到宁江，李纲无法起家，离京远去。
钦宗天子听信谗言，便欲以李纲为帅，率军前去救济太原，李纲大惊道：“臣本墨客，委实不知兵事。当日被君臣被围城中，不得已才为陛下摒挡兵事，今使为大帅，恐误国事。”钦宗天子不准。因而在退朝以后，李纲便称病请去官回籍，连上十数道奏章，俱被钦宗天子采纳。
又过不久，主战派的徐处仁、吴敏被夺职宰相而任主和派唐恪为相，许翰被罢去同知枢密院而起用聂山、陈过庭、李回等人，随后吴敏又被贬谪到涪州安设。李纲得知动静后，感喟道：“事无可为矣！”
因军令不一，各军行进速率分歧，刘韐率部先入太原，被完颜银术可一战尽数击溃，而后完颜银术可又大败解潜部于南北关、张思正部于文水、折可求部于子夏山，宋军二十万雄师折损数万兵败而回。