在迫不及待的情势下，求和乃至投降不失为一条出路，秦桧却不是这样，他完全为金人吓破了胆，卑躬求膝，唯和是求，达到了丧心病狂的程度。而岳飞则是坚决的抗战派，公开反对议和，遣责朝廷的投降政策，多次触怒秦桧。岳飞每打一次胜仗，每向北推进一步，他都会心惊肉跑一次，觉得这样就离求和远了一步。他认为，只要岳飞在世一天，他就会无所作为一天，金人明白他这种难堪的心情，乘机要挟他除掉岳飞，这是他们梦寐以求的，在战场上根本无望作到的事。他们写信给秦桧说道：“你每时每刻都想与我们达成和议，而岳飞积极地谋取河北之地，并连伤我们大将。这仇不能不报！你必须杀掉岳飞，和议才能达成！”秦桧于是更执意要杀岳飞了。但岳飞的名声太大了，不是想杀便杀的。必须是一步一步进行。秦桧决定采取分化瓦解的办法，先将岳飞孤立起来。当时，南宋手握重兵，能独当一面的大将有三位即岳飞、韩世忠和张俊。张俊怯于公战，勇于私斗，素与岳飞有隙，对岳飞屡立显功，少年得志阴怀猜忌，常借故中伤岳飞。秦桧便将他收买，让他参加陷害岳飞的阴谋。韩世忠与岳飞一样，是抗金派的骨。秦桧决定先将他除掉，绍兴十一年，朝廷岳飞与张俊前往韩世忠军队视师，以便寻隙遣散韩家军。在视察时，岳飞见韩家军旌旗鲜明，军马整齐，威武雄壮，心里倍钦佩之情。当张俊提出与岳飞私下瓜分韩世忠军时，岳飞坚持正义，表示坚持反对，指出南宋真正能领兵打仗的，仅仅有二三人而已，如果遣散韩家军，将何图恢复大业？但最终张俊还是秉朝之意，强行解散了韩家军。并欲以谋反罪陷韩世忠于死地。岳飞得知消息后，立即向韩世忠报讯，使其得以采取防范措施，免遭迫害。张俊和秦桧大怒，罗织罪名，罢免了岳飞枢密副使的虚衔。岳飞于是脱去了战袍，退隐庐山。
韩世忠字良臣，南宋朝名将，陕西省绥德县砭上村人，民族英雄。身材魁伟，勇猛过人。出身贫寒，18岁应募从军。英勇善战，胸怀韬略，在抵抗金兵南侵中建立战功。为官正派，不肯依附丞相秦桧，为岳飞遭陷害而鸣不平。是南宋朝一位颇有影响的人物。韩世忠生性直爽，忠于朝廷和国事。岳飞陷冤狱，满朝文武官员无一人敢言，唯世忠仗义执言，为秦桧所恨于心。以反对和议，触怒于秦桧。他持军严整，能与士卒同甘苦，知人善任。部下将校多成长为勇将。解兵罢政后归家十余年，泊然自若。晚年喜释、老之学，自号“清凉居士”。
韩世忠在抗击西夏和金过的战争中为宋朝立下了汗马功劳，而且在平定各地的叛乱中也作出了重大的贡献。除平定方腊外，还为宋庭平定了建安范汝、广西曹成、淮南李横、淮阳刘豫等反叛，为偏安一隅、摇摇欲坠的南宋支撑了几十年。这些赫赫战功，使得他从一名士兵，一步步地被提拔为副尉、承节郎、军统制、团练使、节度使，并历任为江南东、西路宣抚使、兼河南、北诸路招讨使等要职，进太保，封英国公、潭国公。建炎十三年，封咸安郡王。
然而，就是这样一位抗战英雄，却触犯了南宋小朝廷求和媚外的投降政策。由于韩世忠反对议和，多次上疏弹劾奸相误国，为投降派所不容。岳飞蒙冤，举朝文武多不敢言，而他却敢于当面质问秦桧。当秦桧以“莫须有”三字回答时，他气愤地道：“‘莫须有’三字何以服天下！”有人替他担心，劝他不要与秦桧作对，他回答说：“畏祸苟同，他日有何面目见先帝于地下。”后来，他终于被解除了兵权。自此他社门谢客，居家阅书读经，绝日不言兵。他经常骑着毛驴，携小童一二，带着酒壶，闷游于西湖之上。他一生清廉，仗义疏财，历年所得赏赐都分给了部下，田产都分给了他封邑的百姓；他持军威严，能与士卒同甘苦。解职后居家十余年，澹然自若。宋绍兴二十一年（公元1151年），这位一代名将忧郁而死，时年六十八岁，死后被拜为太师，追封通义郡王；孝宗时，又追封蕲王，溢忠武，配飨高宗庙廷。
庐山为天下名山之一，岳飞在戎马倥偬之余，曾几次休养于此，与东林寺慧海经常往来，结下了深厚的友谊。他曾寄诗于慧海：湓浦庐山几度秋，长江万折向东流。
男儿立志扶王室，圣主专师灭虏酋。
功业要刊燕石上，归休终伴赤松游。
丁宁寄语东林老，莲社从此著力修。表明自己功成名就之后，立即激流勇退，终老林泉的心迹。如今虏酋未灭，中原未复，壮志未酬，却上庐山，抚今感昔，无限惆怅。一个秋风萧瑟的晚上，岳飞辗转难眠，披衣彷徨，顾影形单，信笔填成《小重山》一阙：昨夜寒蛩不住鸣。
惊回千里梦，已三更。
起来独自绕阶行。
人悄悄，帘外月胧明。
白为功名。
旧山松竹老，阻归程。
欲将心事付瑶琴。
知音少，弦断有谁听。
岳飞虽然被削夺兵权，罢归庐山，秦桧却仍不善罢甘休，非欲置岳飞于死地而后快。他们威逼利诱岳飞旧部下，让他们揭岳飞的罪状，一部将王俊，绰号叫雕儿，品性奸诈贪婪，常受到张宪的抑制，因而心怀不满。受到张俊的唆使之后，竟将张俊自己拟好的的状词投诉给枢密院，诬告：“逼都制张宪，谋据襄阳，还飞兵柄。”张俊不顾枢密院无审讯权的规定，传讯张宪，严刑拷打，逼其承认他自己绞尽脑汁想出来的罪状，张宪连呼冤枉，宁死不肯虚招。张俊等得不耐烦，又自己虚拟了一份张宪口供，送给秦桧。