岳飞不吃这一套，还是不肯还军，写了第三道奏札，这回变成言志篇。又被赵构封还，加一道《御札》“……将相和则士豫附。”
赵构也怕岳飞犟驴脾气上来，再卷了自己一次面子，于是与此同时，又用三省枢密院的名义，下了一道省札，要鄂州的参议官李若虚和王贵等人一同去到庐山，请岳飞还军。这样反反复复一多百天，岳飞才受诏回返了岳家军营。
郭奕既然答应了岳飞出任都训使的官职，所以一直都等候在军营当中，直到并军彻底没有了可能，才和赵敏向岳飞辞行。
于是岳飞便委托郭奕拐道大名，向赵云等人告知并军失败的情况。
郭奕领命，与情绪更加低落的赵敏，郁郁不乐地离开了鄂州。
岳飞听说刘光世部队的实际长官是都督府的参谋官吕祉，颇为担忧，便写了道奏章，向赵构言明吕祉是如何不可用。
其实在朝野之中，也有不少官员对此提出反对意见，可赵构和张浚君相二人只当是没听见一般。
等到见了岳飞的奏札，反倒是升了吕祉的官——淮西宣抚判官，就任庐州。
其时在淮西军当中，诸将校之间，早就已经矛盾重重。
郦琼等人罗列了王德的罪状，将其告到都督府。结果王德就以其人之道，还治其人之身，也收集罪状反告郦琼等人。
都督府有意偏袒王德，不查处不说，反而再次升了王德的官职。
郦琼等人于是又向御史台投诉，控诉张浚对他们的矛盾未能秉公处理。
御史台的人立刻警告郦琼等人道：“……冒犯了宰相大人，可是要自食其果的。”
郦琼等人闻言又怕又怒，纷纷找吕祉商谈，可吕祉举止傲慢，对众将心存鄙视，还时不时地打报告到都督府给张浚，诉说郦琼等人的罪状。
结果第二封信竟被郦琼的手下截获。为首的郦琼和勒赛赶到吕祉的住处去质问，双方继而争吵对骂。
最后郦琼和勒赛一不休二不做，干脆擒了吕祉，将其砍杀，事已至此，遂召集四万将士，以此裹胁着随军的家属老幼五六万人，浩浩****投奔了北方的伪齐刘豫。
知道了淮西兵变，岳飞又上奏札，对赵构进行了一番安慰，并表示自己愿意率军前往淮西负责防务。
加上之前回到行朝的宣抚判官张宗元，对岳家军的治军理念赞赏有加，于是赵构颁布《奖谕诏》，随同《批答》一同送到岳家军营。
《奖谕诏》曰：“……士闻金鼓而乐奋，人怀忠孝而易从，卿诚如此，朕复何忧。”
《批答》就简单得多了，只说了一句，言说：“还是不用前来了。