不但岳飞受詔回鄂州，朝廷还命杨沂中回镇江，淮西军回池州，刘錡回太平州。宋撤军后，淮寧、蔡、郑又被金兵占领。绍兴十一年初，金兀朮再次南下，攻占寿春、庐州，但宋将邵隆、王德、关师古等连战皆捷，杨沂中在拓皋也取得了胜利。
这时秦檜忽然下令杨沂中和张俊立即撤兵，韩世忠听说之后屯驻濠州不敢前进；刘錡也放弃寿春而回，从此不再出兵。
四月，给侍中范同献计给秦檜，想办法尽收诸将兵权。秦檜密奏高宗，召见三大将论功行赏，韩世忠、张俊同为枢密使，岳飞为副使，令宣抚司军隶属枢密院。
六月，朝廷拜秦檜为左僕射、同中书门下平章事兼枢密使，进封庆国公。不久又被升为少保，加封冀国公，权倾朝野。他坚持主张与金人议和，继续前一年双方协议的程序。正好金兀朮也有意求和，秦檜便上奏朝廷派刘光远、曹勛使金，又以魏良臣为通问使前往金国。
秦檜在绍兴九年怂恿高宗罢了岳飞的军权，原来想趁岳飞成为一介平民的机会派杀手去刺杀他；想不到高宗也不太相信金国，所以给岳飞的名义只是放他一次长假，若有需要随时可以召他回来重掌兵权，所以准许张宪与王贵派兵保护他。
何况岳飞本身武艺十分高强，若贸然派人刺杀，万一失败恐怕反而引祸上身；正在犹豫的时候，金兀朮突然毁约攻宋，岳飞也復职进行第四次北伐。
后来高宗将颁发班师詔给岳飞的工作全权交给秦檜，让他觉得这又是一个陷害岳飞的良机；于是故意快速连发十二道金牌，而且语气出奇的强硬，希望激怒岳飞再度抗命，自己便有机会致他于死地想不到这次岳飞居然隐忍不发，遵照旨意马上班师回朝，使自己的期待又一次落空。
幸好高宗还有韦贤妃这个软肋，秦檜去覲见高宗说：「金人还是很有诚意履行之前的协议，送回太上皇的灵柩与太后；微臣愿意再度与他们重啟谈判，议定新的条件，务必完成皇上的心愿。」
高宗说：「朕有你这样忠心的大臣，真是朕与母后的福气；一切就委託爱卿全权与他们谈判，不管甚么条件，只要不太离谱都可以答应，务必成全朕的孝心。」
于是秦檜先后派遣两批人前往金国谈判新的议和条件，还特别让他的亲信带了一封密函给金兀朮说：「关于诛杀岳飞，永久解除四太子心腹之患，时机已经完全成熟；四太子只需要再和议条件坚持南宋必须诛杀岳飞，并将首级函送金国，我在我朝保证一定完成此事。」
不久，魏良臣与金使萧毅等人商议，双方以淮水为界，让宋割唐、邓二州，秦檜即派何铸报聘答应金的条件。
接着谈到之前金国同意，归还宋徽宗灵柩以及高宗生母韦太后之事，金兀朮想到宋朝居然有岳飞这样的英雄人物，硬是把他踩在脚下，因此只要岳飞在世一天，他就寝食难安；所以几天以来一直想把杀岳飞列为必备条件，又觉得南宋皇帝绝对不可能答应。想不到秦檜在密函里提到的竟然就是这件他梦寐以求的事情，而且说他有把握让此事成真，看来当初自己真是独具慧眼，选择了秦檜这个能力超强的大汉奸。
所以金兀朮马上让金使提出一个条件说：「你们宋朝在和议中答应再多条件，割让多少土地都没用，因为你们只要随后派来岳飞大军又抢回去，我们又没人挡得住他。所以你们一定要先杀死岳飞，把首级送来，我们才愿意跟你们和谈。」
金兀朮使出这招撒手鐧，高宗只好叫韩诚去请岳飞，一起召开紧急会议商量对应之策。
韩诚先带岳飞到他府第后进一间密室，岳飞发现室内有两人正在泡茶间聊；韩诚叫他二人抬起头来，岳飞一看大吃一惊，两人的容貌儼然就是赵构与自己。
「自从经歷苗、刘之祸，皇上便令我在全国搜寻终于找到这两人。」韩诚说：「这两人在我这里吃好住好，只是不能外出。他们一个担任皇上的替身，随时准备为皇上牺牲；另一个若有需要可以扮做你，希望能借助你的威名镇摄意图不轨的人，不敢轻举妄动，让皇上有较充裕的时间逃跑。」
接着他便带岳飞进宫面圣。
高宗首先说，关于大方向的和战今天已经不再讨论。
「宋、金经过二十年的连年大战，双方最需要的都是休养生息。」高宗说：「至少根据我的了解，我朝是绝对撑不下去了。幸好託你的福，金人大概也同样山穷水尽。就算他还要轻举妄动，我方只是防守也比较容易得多。」
因此，这个紧急会议只是针对金兀朮的要求，研究出一个应对的方案而已。
根据使臣的回报，金兀朮显然被岳飞吓破了胆，他认为只要有岳飞在，一路打到他们女真老家都无人能挡，就像他当初攻南宋搜山检海一样，所以他无论如何都不让步。一开始他还要求杀掉岳飞以及十二个军的统制，经过讨价还价最后勉强答应缩减到三个人：岳飞、张宪、岳云。
「朕当然不可能拿你们当牺牲品了，你大可放心。」高宗说：「只不过朕本来想让你含飴弄孙，在庐山安享晚年，这一点可能必须修正了。」
岳飞本来以为找他来是要继续讨论和战策略，根本没料到这种局面。刚才他还跟韩诚谈到，只要把三十万大军全部交给他，两个月也许就直捣黄龙了。韩诚提议，由他扮演秦檜来詰问岳飞。
「请问岳帅，如果你的计画失败，两个月之后粮尽还打不下，甚至兵败，有没有可能导致大宋灭亡？」
岳飞还在沉吟如何回答，韩诚就继续说了：「就算岳帅够厉害，真的一路连打胜仗打到他老巢，他往深山一躲你又捉不到他，他那苦寒之地又搜刮不出什么东西，以后还要派人驻守？耗尽国家财力，佔了一些无用之地。唯一的好处大概就是迎回韦太后而已。」
韩诚最后的结论是，大举北伐万一失败大宋可能灭亡，如果成功对朝廷实质意义不大，只造就岳飞一个人的声望。万一岳飞又再度不受号令，后果更不堪设想！
「臣岳飞一切听任皇上安排。」岳飞拜伏在地。
「岳帅言重了，朕受你们帮助甚多，若非不得已，实在不愿意这样做。」高宗连忙将岳飞扶起来。「你岳父李俊如今已经在暹罗国当国王，你们三人便到那里去过逍遥生活吧。不过听说他们那里四季如春，全年都很热，不知你们能不能习惯？其实朕上次曾经在琉求住过几个月感觉还不错，你们也可以试试看。」
岳飞想到自己这一生，始终为了北伐的信念而努力，即使找了皇帝合伙，最后还是必须半途而废，眼眶不禁充满泪水。
「有很多事情不是单凭一两人努力就可完成，像对抗金人这样的大事更是要分阶段进行，才能毕竟全功。其中最艰难的一段我们已经完成了，想想看，若没有我们，大宋早就灭亡，怎么可能还拥有这半壁江山？」高宗说。
「我韩诚如果有子嗣，我立誓从小教他学兵法，练武艺，长大之后一定让他继续你的北伐志向。」韩诚也说。
「你这次虚拟的罪名，朕在有生之年会尽量设法为你平反；然后追封给你应得的名声与称号，若没意外，你的徒儿会是下一任大宋皇帝。」
岳飞1家人，带着张宪、马成与其家人，由张荣掌舵，从太仓港乘坐海船出海，前往暹罗国。