勤劳治政，向天下人下诏谢罪，以百姓之忧为己忧，那么天下之黎民就可以安居乐业，全国上下就托您的福了。如果陛下不恤百姓疾苦，而仍然大肆铺张，奉佛求福，劳民伤财，则不是天下之黎民百姓所愿看到的。如果因为舍利能经火烧而不损坏，就认为它非常神异，这是不对的，因为它本来就埋在土中，火不能够烧着。如果说舍利能放奇怪的光，必定有神灵依附在上面，这也是虚妄之言。舍利连一座塔都不能卫护好，而终被火焚，那又怎能凭借它来庇护天下百姓呢？”

余靖在职时多次上书言事，其中曾上书指斥夏竦为邪之辈，不能让他枢密使；王举正太无能，不能在朝任职；狄青只是一个武将，让他独自镇守渭州，恐怕会败坏边防；张尧佐因其侄女为中修媛的缘故，除任提府界公事，并非他有政绩所致，况且郭皇后被废之祸起因于杨、尚二妃之得，因此对他不可不特别注意。太常博士王翼从西京治理完狱案后返回京师，皇上赐他五品官服饰。余靖说“：因治理狱案而赐给官服，外人不知详情，必定认为王翼实行严刑峻法，能揣陛下的心思，投陛下之所好，以此来取于陛下，这样所带来的坏的影响就不小了。工郎中吕觉曾经因治理狱案而受到皇上召见。在召见时，他要求陛下给他以奖励，升迁他的官职，陛下晓谕他说‘：我不想因什么人审判了狱案囚犯就给他以恩赐。’吕觉退朝后将此事告诉了我，我也曾将此事记了起居注。陛下前次晓谕吕觉是对的，而现在陛下因同样的事情给王翼以恩赐则有不对了。奖惩赏罚，贵在前后一致。有些诈小人常常是寻找机会，借机求，所幸的是陛下每每在关键时都把握得很好，没有给他们机会。”他的意见大多被皇上采纳了。

刚好西边境停罢战争，元昊求和，要求赐给他们更多的财。余靖说“：景德年间，契丹举国兴兵，一直打到澶渊。先帝北上御驾亲征，渡过黄河，定下澶渊之盟，也只捐给他们金帛三十万。现在元昊尽每战必胜，这都是由于领兵将帅大意轻敌的缘故。多年来选将练兵，到现在才知战守之所需，而今天停战讲和，却要给他们金帛二十六万，这实在不值。再说战事也还有转机，国力却有限，如果照他们的条件停战讲和，以后后悔只怕也来不及了。就拿景德年间之讲和来说，那还近在封域之内，每年给他们的财只有那么多；现在的危机远在西边境之外，每年却要赐给他们这么多。如果答应元昊他们的条件而停战讲和，那么契丹知这件事后，难不会生异心？这样贪婪的要求从此就会越来越多，国无宁日了。倘若以西之兵力移至北边境防守，祸患就大了。既然讲和与不讲和都有后患，则没有必要曲意求和了，以免国家蒙受耻辱。”升迁余靖知制诰。

元昊既已归顺，朝廷就想册封他，而契丹则将军队带到西边境，并派遣使者到朝廷说：“我们来为中国讨伐贼，请不要与他讲和。”朝廷对此到非常为难。刚好余靖多次说契丹非常狡诈，认为这是威胁、要挟，不能轻易答应，于是派遣余靖前往斡旋，同时对夏国的册封诏令也暂时留而不发。余靖到契丹，终于使他们罢兵而还。朝廷于是发了对夏国的册封令，元昊对宋朝称臣。这样西边境战火停息，北边也相安无事。余靖三次使契丹，也学会了外国语言，曾经用蕃语作诗，对此，御史王平等人弹劾余靖，说他有失使者份。余靖被贬知吉州。

余靖为谏官的时候，曾经弹劾太常博士茹孝标不守孝，隐匿其母亲丧事，不回家奔丧守孝，茹孝标因此被罢免。余靖既然已失势，茹孝标这时也到朝廷说余靖少年时游于广州，曾经犯过法，受到过责罚。余靖闻知此事后，心里到很不自在，于是以侍奉双亲为由，上书朝廷请求归家。改任将作少监，分南京，居住于曲江。不久授任左神武军大将军、雅州刺史、寿州兵钤辖，他推辞不去上任。又改任卫尉卿、知虔州。其父死，归家。

侬智在邕州起兵叛，乘胜掠占九个郡，并派兵包围了广州。朝廷为了平息这场叛，即起用余靖为秘书监、知潭州，又改知桂州，诏令广南西路受余靖节制。侬智向西逃往邕州，余靖估计到他必定与趾结盟，并胁迫当地诸峒人以为援助，于是与李德政相约，集合兵力在邕州围剿叛贼，并储备了上万人所需的粮在邕州等待侬智。朝廷亦下诏给李德政缗钱二万以帮助他起兵，并约定，平息叛后再赏赐他缗钱二万。又招募侬、黄各姓的酋长，给他们封官，使他们不与侬智勾结。接着朝廷派狄青、孙沔率兵讨贼。狄青击退趾，使侬智失去援兵，最后平息了叛贼。就地升迁余靖为给事中。御史梁。。认为余靖讨叛贼，立功很大，而赏赐太轻了，于是又升他为尚书工侍郎。