第二天晚上，宇文邕没有向高长恭辞行，便和自己的侍卫趁着夜幕离开了。一路上，侍卫曾问过宇文邕为何离开的如此匆匆，宇文邕则告诉侍卫不喜欢看分别相送的景象，倒不如如此来的痛快。
几天后的中午，皇上的书房之内，皇上坐于书桌前，高孝瑜则坐在殿内的凳子之上。
“孝瑜，可都准备好了？”皇上端着茶杯，轻轻的抿了一口说道。
“恩，已经部署好了，可确保万无一失。”高孝瑜说道。
“那好，今天晚上咱们就去挫挫他高归彦的威风，打他个措手不及。”高湛笑着说道。
高归彦，曾为高湛登上皇位尽过一些力。高湛即位后，进位太傅，领司徒，常听将私部曲三人带刀入仗。从武成还都，诸贵戚等竞要之，其所往处，一坐尽倾。归彦既地居将相，志意盈满，发言陵侮，旁若无人。因此惹得皇上有所忌惮。
晚上，高湛在高孝瑜等人的陪同下进了太傅府（高归彦的府邸），并未故意掩人耳目，但却无人向高归彦禀报。高归彦的管家将皇上引到一个房间说道：“皇上，这个房间靠近老爷的大厅，一会儿老爷会客所说的话，您在这里可以听得一清二楚。”
“恩，退下吧。”高湛说道。
待管家退出去后，高湛对高孝瑜小声的说道；“其实，这次我不想带你来，我怕日后你会怕我也会对你这样，但是，我现在真正敢相信的人只有你，而且这次都是你帮我部署的，所以只能让你随我一起来了。”是的，因为这次出宫，如果没有将高归彦府上的人全部变为自己人（当然所谓的变为自己人，有一部分是很久之前就安插进去的，有的是靠说教，有的是靠权利引诱，也有的是靠威逼），那么无疑是将自己置于为难之中。而且如果把这件事情交给自己不信任的人，那个人很有可能会与高归彦合谋，那么自己的处境将更加危险。
“谢陛恤，我相信日后如果我不想太傅一般，陛下也不会如是对我。”高孝瑜说道。是的，自己的确怕过，但是后来知道怕也是没有用的，只能告诫自己日后一定要更加严守克己。
“即便你如他一般，我也不会如此待你。”高湛笑着说道。
高孝瑜用细微的只有高湛能够听到的声音说了句：“谢谢你，阿湛。”
两人相视，会心的一笑，便没有更多地话语。
没过多时，高归彦的宾客们都陆续到了，宴会之上，高归彦犬马声色，时不时还对皇上说出几句大不敬之语。皇上在屋内听着，笑容越发的寒冷。
“高乾和，拟诏书，太傅高归彦，劳苦功高，免太傅等所有职位。封为冀州刺史，即日启程赴任，未得召见，不得回宫。诏书明早颁给他”高湛还未等宴会结束便对随从的大臣说道。
“臣遵旨。”
第二天清晨，高归彦起床梳洗完毕后准备去上朝，到了门口之后，却被门口的侍卫问道；“大人，你这是去上朝吗？”
“废话。”
“大人您不必去了，您上朝要见的人现在就在府上。”门口的侍卫说道。
“你什么意思？”高归彦机警的说道。
“皇上昨天晚上就已经来到府上了。”
“你说什么？”高归彦立着眼，掐着侍卫的脖子，想将所有的愤怒与恐惧全部发泄到那个侍卫身上，嘴里狠狠的说道。高归彦已经知道事态的严重性，既然皇上能够进到府中而不被自己知道，那么自己府上的人都已经信不过，那么自己原来在府上肆意说的那些忤逆的话皇上一定也都知道了。
“太傅，您打他也没有用，皇上已在内殿等候您多时了！您还是赶紧过去吧！”高乾和笑着说道。
高归彦看到这个自己昔日的手下，这个此时不该出现在自己府中的人，嘴中骂了句：“你个叛徒。”便急着向自家的内殿走去。
高乾和则在后边说道：“我不是叛徒，我为臣子，臣子唯一该忠于的只有主上。”
高归彦来到内殿，看到正襟危坐的皇上，腿一软，一下子跪倒在地上。
“刺史这是做什么呀？”皇上说道。“哦，对了。高乾和，赶快颁旨。”
“是，…。”高乾和将昨晚拟的旨意念了出来。
“臣领旨。”高归彦接过圣旨说道。
“先和眹进宫吧。”皇上对高归彦说道。
“是。”
一行人进宫后来到了青阳宫，高归彦看到殿内全部都是武官，大部分都是自己的原来或者现在的部下，皇上又让高乾和当众念了一遍圣旨，却是无人为高归彦求情，高归彦看到此景，凄然的笑了笑，笑这世态炎凉，笑这不念旧情。