李綱整頓軍政的設施，有助于趙構支撐局面，趙構自然是樂意的。
可李綱的目的卻不是幫趙構得天下，而是想要趙構回京去輔佐趙諶，匡扶趙宋。
這就是趙構所萬萬不能接受的了。
公平的說，趙構是有一些他自己當皇帝的野心，但使趙構堅持不回京的，卻不是趙構的野心，而是趙構的恐懼之心。
可能是天賦異稟，趙構對于危險異常的敏感。
趙構能夠清楚的感覺到，他若是回到東京汴梁城，肯定是十死無生，韓擎是絕不會放過他的。
對于這一點，趙構深信不疑。
故而，打死趙構，趙構也絕不能回京。
所以，面對李綱的規勸，趙構朗聲道：“韓擎欺天罔地，滅國挾君；穢亂宮禁，殘害生靈；狼戾不仁，罪惡充積！今某大集義兵，誓欲掃清華夏，剿戮群兇。望興義師，共泄公憤；扶持王室，拯救黎民。”
說到這，趙構抽出腰間寶劍，一劍斬斷手邊的一株盆栽，道：“再敢勸某回京，有如此樹！”
李綱剛想說話，趙構就先發制人道：“調李綱任尚書左仆射兼門下侍郎（左相），黃潛善接任右仆射兼中書侍郎。”
明眼人都能看得出來，趙構這是明升暗降，以手握重兵的黃潛善牽制李綱，這也是趙構給李綱的警告。
李綱見了，心就是一寒！
李綱豈能不明白，趙構這是準備卸磨殺驢了。
關鍵，李綱還不是為他自己心寒，他是擔心大宋王朝將要徹底分裂了！
趙構現在還沒有登基，還在尊趙諶為皇帝。
可很明顯，趙構根本就是口不對心，他一點促成大宋王朝統一的心思都沒有，他的心思就是擁兵偏安一隅。
這可急壞了李綱！
李綱后悔極了幫趙構收攬兵權：“早知康王如此，我無論如何也不能助紂為虐！”
李綱想不顧一切的勸趙構！
可趙構一率袖子，就走了，原地只留下文武百官議論紛紛！
以李綱、孫昭遠、錢蓋等人為首的人主張，現在是完成大宋統一的絕佳之機，希望大家能一塊聯名勸趙構率領眾人前去京師，與韓擎手上的人馬會師一處，然后趁金人遭逢大敗北上收復河北、河東，以大軍威壓燕云，逼金人放回趙佶、趙桓、趙氏之人、趙宋的皇親國戚及其他宋人。
可以耿南仲、汪伯彥、黃潛善為首的人卻認為，韓擎只是想將趙構誆回京師，欲滅趙氏滿門，并以韓擎已占四五百趙氏之女和趙宋的皇親國戚之女為由，將韓擎比作董卓，說韓擎穢亂宮禁，其心可誅，又說韓擎挾天子以令天下，必是曹操無疑，曹操者，滅漢國賊也，韓擎必欲滅趙宋，他們是趙宋之臣，理應忠于趙宋，擁趙構南遷揚州（后世江蘇揚州），然后徐徐而圖之。
與此同時，有那奸邪小人偷偷離去，然后跑到趙構身邊大說特說李綱不可為相。
御史中丞顏岐說：“李綱為金人所惡，又心向韓賊，不宜為相。”
右諫議大夫范宗尹說：“李綱名浮于實，有震主之威，大王不可不防。”
過了一會，汪伯彥也偷偷跑到趙構身邊，說：“今韓賊力敗金人，勢大難敵，他若統兵南下，大王何以御之？應早謀南遷，屆時以江淮為險，讓韓賊無法南下寸步。”
汪伯彥又道：“東南富饒、人口眾多，乃三國東吳發家之地，大王在東南經營三二年，挾百萬大軍北伐，定能一舉滅掉韓賊，然后盡復大宋疆土，再然后北上代金，報仇雪恨，成就萬世基業，比肩秦皇漢武唐宗宋祖。”
不久，耿南仲、黃潛善等也一一來到趙構身邊，他們也規勸趙構擁兵南渡。
趙構聽了，心動不已！
另一邊，議事廳內，隨著趙構的親信一個個離開，李綱、孫昭遠、錢蓋等相要促成國家統一的人的戲也唱不下去了，進而紛紛失望離開。
李綱也不知避嫌，他直接與西道總管孫昭遠和陜西制置使錢蓋一道，還欲叫東道副總管朱勝非一塊來商議對策。
但朱勝非猶豫再三，最后并未跟李綱等人走。
等眾人走得差不多了。
趙構新任命的光州觀察使、帶御器械的韓世忠，也混在人群中走出了議事廳。
雖然韓世忠神色如常，但他心中卻盡是失望！
韓世忠是典型的軍人，他并不像李綱他們那樣心中有那么多大義，他所失望的僅是趙構的選擇——偏安一隅。
雖然趙構說得挺霸氣，什么“誓欲掃清華夏，剿戮群兇。望興義師，共泄公憤；扶持王室，拯救黎民。”，可趙構結尾所說的卻是“誰再敢勸某回京，有如此樹”，這很明顯就是不想北上，不想北上，那想去哪，答案昭然若是——南下。
身為一名杰出的軍人，韓世忠很敏銳的感覺到，一旦趙構擁兵南渡，那么再想殺回來，怕是就難了。
更讓韓世忠失望的是，趙構可能壓根兒就不想殺回來。
在韓世忠看來，趙構這既是懦弱的表現，又是鼠目寸光的表現。
韓世忠希望趙構帶著這五十多萬大軍回到京師，看看韓擎到底會不會履行他的承諾，將帥權交出來？
不交，打就是了，小小的東京，能有多少人馬？
交，那趙構就擁有大宋王朝的全部兵權，一個小小的韓擎有什么好畏懼的？
其實——
韓世忠對趙構的失望不只是現在才有，而是很早以前就有了。
趙構到南京不久，韓世忠就建議趙構帶著這五六十萬大軍北上與金軍決戰救援汴梁城。
可趙構卻推脫范訥等人不聽其調遣而百般不愿北上。
從那時起，韓世忠就看出來了，趙構生性膽小懦弱，又鼠目寸光，難成大事。
與趙構相比，韓世忠倒是覺得，跟他同姓的韓擎挺對他的胃口，在那樣的逆境下竟然還能全殲來犯的金軍，揚大宋國威。
之前在滹沱河一帶擔任防守任務的韓世忠，跟金人可謂是數次交戰。
一度，韓世忠也曾被金軍追逼退入趙州城內。
當時，敵兵圍城數重。城中兵少糧乏，軍心不穩，有人主張棄城而遁。
韓世忠傳令下去，有敢言棄城者斬。
當天夜里，天降大雪，韓世忠選精壯士卒三百人，悄悄出城，然后偷偷摸進金軍圍城主帥營帳，殺死主帥，后偷襲金軍駐地，挑起金軍內部誤會相互攻殺。
一夜大戰，金軍死傷過半，無心再戰，于是潰散退去。
雖說那一戰韓世忠大勝，但金軍的厲害，韓世忠也是充分領教過了。
不想，那么厲害的金軍，竟然被韓擎率領一群殘兵敗將全殲了。
“真是好生厲害！”
帶著對韓擎的佩服，韓世忠向他在應天城中的臨時住處走去。
可就在韓世忠即將到臨時住處路過一個小巷時，小巷中突然響起一個低沉的聲音：“韓觀察請留步。”