赴邺都迎接武成帝。武成帝即位，他升任太傅，兼司徒，常听任他带贴家丁三人佩刀仪仗。随武成帝还都后，诸贵戚都争着邀约他，他的住，也总是朋满座。归彦既已位居将相，志意骄傲起来，开伤人，目中无人。人们都议论他威权震主，迟早会成为祸害的。皇上也追索到他过去翻覆动摇的情况，渐渐地也忌恨起他来。元海、毕义云、和等人也都多次揭他的短。一次，皇上到归彦家中，便召魏收在御前作韶书底稿，准备给归彦加上个右丞相的名义。魏收对元海说：“皇上就是从右丞相位上登基的，而今因归彦权威太重，才准备外放他，怎么可以再加逭个名号呢？”于是拜归彦为太宰、冀州刺史，就由和当场缮写好任命韶书。天亮后，又下令官门守卫不得让归彦自己。那时归彦正在家尽情喝酒，整夜情况毫无所知，到天亮后准备上朝，走到门前才知发生了变故，大吃一惊，回到家中。及至上表谢恩，皇帝则下令及早动赴任，另外赐给他钱帛、鼓、医药等，样样齐备。又下令全武职官员都去青为他送别。参拜后就退回了，谁也不敢跟他打招呼。他衹是跟趟郡王叙说了很长时间话，当时没人听到他俩讲了些什么。

到了冀州刺史任上，归彦心不自安，起了造反叛的念，打算等到受调完毕，皇上为有功将士颁赏时，希望车驾去晋，乘虚攻邺都。逭谋被他的郎中令吕思礼所告发，朝廷下韶令平原王段韶去剿袭他。归彦早先在州境南安排了为私人传递信息的驿站，听到朝廷大军将近冀州，向他报告了，他便发兵闭城固守，抵御朝廷大军。遣以前，冀州长史宇文仲鸾、司李祖挹、别驾陈季璩、中从事房弼、长乐郡守尉普兴等怀疑归彦怀二心有异谋，曾联名派人向朝廷密报，被归彦追获了，便搜捕囚禁仲鸾等五人，五人都不屈服，全被杀害了。大军已到城下，归彦登城大叫说：“孝昭皇帝驾崩之初，全国六军百万之众都在我的手上，我自己到邺城专程迎接陛下，当时不反，今Et怎么倒有异心呢!我就是恨元海、毕义云、和诳骗皇上，嫉妒忠良。衹要杀了这三个人，我就自杀在遣个城上!”其后城被攻破，他一人单骑向北方逃跑，逃到津被迫获，锁送京师。皇上派赵郡王数以私人名义去问他造反的缘故。归彦说：“竟让一帮黄小来挟制我，我怎么能不反!”问：“谁？”归彦说：“元海、和能算朝廷长者么？如果是您赵家老公时，我又怎么会内心不平呢!”于是皇帝又派人去谴责他。他说：“元海收受了毕义云的宅，就用他为本州刺史，还给后鼓。我是藩王、太宰，却并没有给鼓。就该杀了元海、义云!”皇上便令都督刘桃枝将其牵来，归彦这时还说那些话希圆活命。皇帝命群臣公议他的罪过，都说罪不容赦。便用囚车装上他，嘴中衔枚噤声，双臂反缚于后，刘桃枝把刀搁在他脖上，敲着鼓随于其后，连孙十五人都杀死在刑场上。赠给他仁州刺史的名分下葬。

早在束魏时发生了山崩，得到两片石角，藏在武库裹。文宣帝库，赐从臣兵，特地把这两片石角给了归彦，对他说：“你以后事奉常山王不得谋反，事奉长广王要谋反。谋反时，就用遣两片石角去吓唬人。”归彦有三额骨，冠也不稳，文宣帝曾见到过，生了气，让人用鞭打他的额，血满脸，说：“你造反时就用这片骨去吓人吧!”这些说他反叛之言竟然应验了。

武兴王普，字德广，是归彦之兄归义的儿。为人宽和有度量。九岁时，归彦从河州跟他一起到了洛，祖使其与诸一同游玩相。天保初年，封为武兴郡王。武平二年，升迁到司空。六年，拜任豫州行台、尚书令。后主奔邺城，就在那儿给他加任太宰。北周大军近，他便投降了。死在长安。赠给他上开府、豫州刺史。

垦銮太守茵驰，字星崖，是直担族弟。跟随产担起兵于值都，死于昼乐太守任上。赠给他大将军、司空，又谧为宣。其直懿，死于武垩镇将任上，无后，文宣帝便以灵山的堂兄壹丛刺史产建国的儿伏护为灵山后嗣。