逢张俊军队来到，戚方于是投降。范宗尹说张俊从浙西来，盛赞岳飞可用，朝廷因此将岳飞擢升为通、泰镇抚使兼知泰州。岳飞辞谢，请求担承淮南东路一重要而艰难的职务，收复本路所辖州郡，然后伺机北，渐次收复山东、河北、河东、京畿等路沦陷地区。

恰逢金军加攻楚州，形势十分危急，朝廷令张俊率增援。张俊推辞不去，朝廷于是派遣岳飞前去，同时命令刘光世兵随后支援岳飞。岳飞驻扎在三敦土作为楚州援兵，不久抵承州，三战三胜，杀死敌将太保，俘虏敌军首领七十多人。刘光世等都惧敌不敢前，岳飞势单力小，楚州终于被金军攻陷。诏令岳飞回军守卫通、泰，并言明能守就守，如守不住，便在沙州保护百姓撤退，伺机掩击敌人。岳飞认为泰州一带无险阻可以依恃，遂退保柴墟，同金军在南霸桥展开激战，大败金军。在沙州护卫百姓渡江，岳飞率领二百名锐骑兵殿后，金军不敢近。岳飞因泰州失守请求朝廷分。

绍兴元年(1131)，张俊请让岳飞一同前去讨伐李成。当时李成将侵犯洪州，在西山一带连营结寨。岳飞说：“敌人贪图立功而不顾后路，如果用骑兵从上生米渡过江，其不意从后面发起攻击，必然能够击败敌人。”岳飞请求由自己亲自担任先锋，张俊大喜。岳飞披重甲骑着战，悄然现在敌军右翼，突敌阵之中，所随之跟攻击。大败，逃往筠州。岳飞追击抵达城东，贼众城，布阵连绵长达十五里，岳飞设置伏兵，以红绸缎旗帜，上绣“岳”字，挑选二百名骑兵跟随旗帜前。敌人认为岳飞兵少可欺，向其发动攻，预先埋伏的军队突然杀，敌人大败而逃。岳飞令人大声呼喊“：不愿追随贼寇者坐下，我们不杀害你们。”于是坐下投降的贼众达到八万多人。率领残兵到南康投奔李成。岳飞于夜里领军至朱家山，又斩杀其将领赵万。李成听到失败的消息，亲自率领十多万的人赶来。岳飞与李成在楼庄遭遇，大破李成军队，追击斩杀。李成败走到蕲州，投降了伪齐政权。

张用侵犯江西，张用也是相州人，与岳飞是同乡，岳飞写信劝告他说：“我和你是同乡，以前的南薰门、铁路步之战，都是你所了解的。今天我在这里，你如果准备决一死战就请来，不战就请投降。”张用接到岳飞的信后说“：果真是我的再生父母。”于是率众投降。

江、淮平定之后，张俊奏报岳飞战功第一，朝廷封岳飞为神武右军副统制，留守洪州，镇压境内盗贼，授予他亲卫大夫、建州观察使官衔。建州贼寇范汝为攻陷邵武，江西安抚使李回急告岳飞分兵保卫建昌军及抚州，岳飞派人将“岳”字旗在城门上，贼众望见，互相告诫不要侵犯。贼寇同党姚达、饶青近建昌，岳飞派遣王万、徐庆率兵讨伐并将他们擒获。因功升为神武副军都统制。

绍兴二年(1132)，贼寇曹成率领众十余万人，从江西经湖湘，占据、贺两州。朝廷命岳飞权知潭州，兼权荆湖东路安抚都总，付给他金字牌、黄旗招安曹成。曹成听说岳飞将到，惊呼：“岳家军到了。”即刻分路逃跑。岳飞至茶陵，奉诏招安曹成，曹成拒不归降。岳飞上奏“：近年来多次下命招安，因此盗贼力量大时便恣行暴，力量弱小时就接受招安，如果不加以剿灭铲除，蜂拥而起的盗贼就不可能迅速消灭。”皇帝同意他的意见。

岳飞贺州境内，抓获曹成的间谍，捆绑在营帐下。岳飞走营帐分粮草，有关官员报告说：“粮已用尽，怎么办？”岳飞假装说“：暂返军茶陵。”随即回看到间谍，又装因机密而懊丧的神态，跺脚营帐，暗地里下令让间谍逃走。间谍回去告诉曹成，曹成闻讯大喜，约定第二天追击岳飞。岳飞下令士兵早起吃饭，然后悄悄绕岭急行，天未明，已到太平场，攻破曹成营寨。曹成依托险阻抵御岳飞军攻，岳飞指挥军队掩击，敌人大败溃逃。曹成逃到北藏岭、上梧关一带盘踞，派将迎战岳飞，岳飞不待他摆好阵势就击鼓击，士兵人人奋勇争先，夺占两个关隘。曹成又从桂岭设寨一直到北藏岭，接连控制隘要通，亲自率领十多万人守卫蓬岭。岳飞仅有八千人，一鼓作气登上山岭，大破曹成大军。曹成逃到连州。岳飞对张宪等人说：“曹成同伙已经溃散，追上去杀死他们，那么许多胁从者又让人怜悯，放走他们，又会重新聚集起来成为盗贼。现在派遣你们去诛杀他们的首领而招抚他们的众，小心不要妄加杀戮，使皇上护百姓的仁德受到损害。”于是张宪自贺州、连州，徐庆自邵州、州，王贵自郴州、桂州，招降曹成下二万人，与岳飞在连州会合。军追击曹成，曹成逃到宣抚司投降。当时于盛夏季节在有瘴气的地区行师用兵，由于岳飞理有方，士卒没有一人死于瘟疫。岭表平定，被授予武安军承宣使，屯驻江州。刚刚境，安抚使李回命令岳飞捕拿大贼友、郝通、刘忠、李通、李宗亮、张式，岳飞都一一平定。

绍兴三年(1133)天，朝廷召岳飞前往行在杭州。江西宣谕刘大中上奏说“：岳飞的队军纪严明，当地百姓依赖他们得到安宁，现在赶往行在，恐怕盗贼会死灰复燃。”因此岳飞没有成行。当时虔、吉州盗贼联兵寇掠循、梅、广、惠、英、韶、南雄、南安、建昌、汀、邵武等州郡，皇帝专门下令让岳飞前去平定。岳飞到虔州，固石贼寇彭友率领全人至雩都迎战，他本人跃直冲宋军，岳飞指挥士兵在上把他擒获，其余的贼寇首领退保固石。固石地势险峻四周有环绕，只有一条小路可供往来。岳飞将骑兵在山下列阵，命令他们都拉满弓弦，待到黎明时分，派敢死队迅速击登上山，敌众大，放弃山四下逃散，被岳飞的骑兵包围。贼众呼喊乞求饶命，岳飞下令不要屠杀，接受他们投降。岳飞传授徐庆等人计谋方略，让他们搜捕各地残余的贼寇，都一一攻破并迫使他们投降。当初，因为隆佑太后曾在此受到惊吓的缘故，皇帝密令岳飞占领虔州城后屠尽城中民众。岳飞请求诛杀首恶而赦免胁从，宗不许；岳飞再三恳求，宗才下令赦免。城中百姓激岳飞恩德，绘岳飞像供奉起来，余寇聚、张成侵犯袁州，岳飞派王贵率军前去将其平定。

这年秋天，岳飞朝觐见宗，宗亲自书写“：忠岳飞”四字，制成旗帜赐给岳飞。朝廷任命他为镇南军承宣使、江南西路沿江制置使，不久又改任神武后军都统制，仍保留制置使职务，李山、吴全、吴锡、李横、皋等都隶属他统辖。