都是我祖父的老下，臣愿意在战前宣扬我朝的威信，他们定会相继投降，外援被降服后，再攻一座孤城，取胜还不是易如反掌。”太武帝“：好。”于是派他去招降，争取了三万多人，等围困了姑臧城，由于没有外援的顾虑，所以能集中力量攻城。凉州平定后源贺因为战功晋爵位西平公。他又随驾征讨蠕蠕，打五城吐京胡，讨伐盖吴等贼寇，都立了大功，官拜为散骑常侍。他跟随御驾至长江，作为前锋大将，他善于抚士卒，而且有料敌制胜的谋略。源贺为人勇敢果断，每次遇到敌都亲自与敌奋力搏斗，皇帝常常劝诫他。源贺原名破羌，在那场战役中，皇帝对他说：“人起名字应该保有其实，怎么能起呢？”赐给他名贺，官拜殿中尚书。

南安王余即位后被宗所杀，源贺统率禁兵，控制内外局势，并和南尚书陆丽商议决定国策，拥文成帝，令陆丽和刘尼骑至皇苑中恭迎，源贺在禁军营中为内应。不一会儿陆丽抱着文成帝，同骑一匹而来。直到即位，源贺都起了很大作用。因为他有参与决定国策的大功，晋爵为西平王。在赏赐百官的时候，敕令源贺可任意选取品，源贺推辞说因为长江以南尚未宾服，大漠之北没有称臣贡，国家府库不应该因赏赐而致匮乏。文成帝持让他取一件赏，他只取了一匹战。

当时断狱判刑都过于严酷，源贺上书奏“：照法律，谋反的，他的孙就算是被其他家族收养，也要追查来诛杀，这是为了断绝罪人的同类，宣扬大逆之臣的死有余辜。那些盗而应被杀的人，他们的兄弟侄若远隔千山万都不用被株连。臣窃以为先朝制定此项法律的意义，在于防止同谋，若犯的不是灭族大罪，就要专门下不连坐的诏书。若家长犯了十恶不敕的罪，而孩在十三岁以下，不可能参与同谋。依臣愚见应该饶了他们命，罚没官。”皇帝接受了他的建议。

源贺又任冀州刺史，改封陇西王。受任命后，他上书：“臣听人说最珍贵的莫过于生命；恩德最厚的莫过于饶恕人的死罪。然而犯死罪的，也不能都宽恕。应该衡量罪行轻重，还是有些值得怜悯恤的。如今北方有悍的夷寇在游弋扰，南面有狡猾的蛮贼据险作，在田中耕作的农民，还要服役去戍守边防。依臣愚见除了犯下大逆不，空手杀人的大罪，那些贪污、盗窃及过失犯罪的罪人照法律应该死的，都可以放他们一条生路，让他们戍守边境，这样就使那些本已丢了命的人，又受了再生的恩德；而必须服役的农家，享受了得以休养生息的恩惠。刑罚措施的改良，希望能由此开始。”皇帝对这个建议十分赞赏，并批准执行，从此犯了死罪的人，都被饶了命而去戍边。过了好些年后，皇帝对群臣：“当年源贺劝谏朕，宽宥所有的死刑犯人，让他们充军到北边境戍守。从那时起，一年所存活下来的就很不少。这样不但保存下了许多人的生命，而且满足了戍守的兵源。假若人人都像源贺一样，朕统治天下，还有什么可担忧的！”群臣都说“：不是忠臣不会提这样的建议，不是圣明之君也不会接受这样的建议。”

源贺在冀州执政期间，裁断官司通情达理，从不大兴劳役、兵役之事，清廉节约，宽宏大度，得人心。当时武邑郡的险小人石华诬告僧人可和源贺密谋造反，有关门将此消息上奏。文成帝“：源贺绝对不会这样的事情。”于是命人仔细审讯，石华果然招供是诬告。于是又派使臣向源贺加勉。皇帝对左右亲信大臣：“源贺忠心耿耿，尚且招致诬告毁谤，那些不如他的大臣，更得小心警惕！”当时考功绩，源贺政绩为最上等，皇上赐予衣服匹，颁诏告知天下。

后来源贺又被封为太尉，蠕蠕侵犯边境，源贺随驾征讨，大败贼寇。献文帝想要将帝位传给京兆王推，当时源贺统率大军屯兵大漠以南，皇上让人飞骑召源贺回京。源贺回京后，持说不可。于是皇上立刻下诏让他持节捧着皇帝的玉玺印绶传给孝文帝。同一年，黄河西面的敕勒叛，派源贺兵征讨，大破贼兵。源贺参考古代和当世的兵法以及前辈名家的描述，取其髓，成十二阵图，献给朝廷，献文帝阅览后颇为赞赏。

源贺后来又统率三的大军屯住在漠南。当时每年秋冬季，都要将三大军一起派，用来防备北面的敌寇，到第二年天才班师。源贺认为这样给京城增加了许多劳役的任务，又不是防御边患的长久之计，于是向朝廷上奏，请求招募各个州城、军镇中有武艺和胆量者三万人，免除他们的劳役和赋税，多给他家救济补助。将这三万人分成三个分，在每两个军镇之间建筑一座城防，每座城里驻扎一万人，发给十二只带架的弓，三百辆武士乘的战车，每只弓给六，每辆战车给两斗。大量制造和兵以及其他械，每城派二名武艺谋略的大将镇守。冬天时练武艺，天时从事农业，一边戍边一边耕作。这样士兵不会疲惫而且有粮草的积蓄。还可以在白南面设立三粮仓，将附近州镇收的租粮运来储备。这样兵源粮草都充足，用来防备难以预料的敌情，十分便利。用不着每年都兴师动众。这项奏议被搁下没有回报。