“陛下啊，您斩草不除根，春风吹又生。这世事谁也无法预料。废帝现在虽然处于劣势，可是他还有亲兄弟在，又甚得汉族士子的拥护爱戴，始终是个隐患，望陛下一定要警惕。”

一开始，高演觉得他是杞人忧天，不予理会。就淡淡地说：“朕知道了，你退下吧。”

过了一段时间后，高归彦又来向高演说：

“臣启奏陛下，近来听到不少的传闻，说陛下强夺侄子的皇位，在汉人眼中等同谋逆，这些汉族读书人还说废帝是位明君，替他可惜了。”

高演听到汉人士子赞颂废帝高殷，心里感到很不舒服。他挥退了高归彦，回到了御书房，一个人坐在那里，闷闷不乐。

他想起自己曾在母亲面前承诺不会伤害高殷的性命，但这个高归彦老是提起这件事，令他十分苦恼。

直到内侍来禀报说晚膳准备好了，请皇上用膳。高演才站起来向自己的寝殿走去。

几个月过去了，有一天，朝中有大臣说邺城的汉族读书人结社讲学时曾提到废帝高殷，说他是大齐国难得的一位平等看待胡汉两族人的君主。

到了皇建二年（公元561年）的秋天，，太史官说夜观天象，发现星象有异，便来禀告高演。

高演听后，如哽在喉，不吐不快。命人去传高归彦来见他。高归彦来到后，跪下行礼说：“敢问陛下，召臣来有何事吩咐？”

“平秦王老是说废帝他日恐怕是一个祸害，可有办法除之？”

“回陛下，要除后患，唯一的办法就是杀之。”

“可朕答应过母后和先帝，不伤害他的性命，如果杀了他，岂不是食言了？”

“请恕臣斗胆直言，陛下所说之承诺是此一时，彼一时也，臣猜想陛下当时应允是怀着真心实意答应的，并无半点虚妄之意。

这就说明陛下在当时的一刻确实是没有一丝一毫要取废帝性命的想法。表明陛下已经是守了诺言。

可是现在情况已经发生了翻天覆地的变化，形势和以前大不相同，如何还能守着当时的诺言而违背现在的实际情况行事呢？

臣冒死上言，恳请陛下不要再顾及那些虚妄的诺言，坏了日后的朝纲大事，否则悔之晚矣！”

“这件事母后是坚决不会同意的，她老人家也是想替先帝保留着孙儿的性命，朕这样做就等于忤逆母后，是大不孝的行为。”

“陛下，假如害怕忤逆太后的话，臣有一提议，请陛下恕臣无罪。”

“朕恕你无罪，你直说吧。”

“臣遵旨，这件事陛下一定要秘密进行，万不能让太后知道，说句大不讳的话，太后也是上了年纪的人了，只要一直瞒着她，说不定待她千秋过后，她也不会发现呢。”

高演被高归彦说服，同年（561年）九月，孝昭帝高演密令高归彦去晋阳将高殷杀害，少年废帝时年十七岁。

直到事隔一年后即562年，这件事才被娄昭君发现，下令将高殷葬于武宁陵之西北，谥号闵悼王。