对于高洋要废魏称帝，东魏统治集团内部出现各种不同的声音，许多人都反对。
当高洋禀告母亲娄昭君说自己打算自立称帝时，娄昭君摇头苦笑着说：“你父王英武如龙，你大哥明睿如虎，他们都是威赫天下的人，犹且向魏帝俯首称臣。你问问自己何德何能，竟敢行舜禹禅让之事？”
回想当初高澄谋划准备称帝的时候，娄昭君没有跳出来反对，说明娄昭君其实并不了解自己的二儿子，还一直以为高洋是个资质一般的人物。
高洋见母亲反对，心里也有些犹豫，为了稳妥起见，高洋又召见了肆州刺史斛律金和贺拔仁，问他们对自己称帝的态度。
谁知二人都反对高洋仓促称帝，因为他们认为高洋只是个听话但无甚建树的普通人，能守住高欢和高澄留下的基业就已经是不错了。
虽然称帝困难重重，但高洋依然没有死心，因为做皇帝的诱惑实在是太大了。
徐之才和宋景业同样遭到了勋贵们的指责，不过他们根本不在乎这些人的七嘴八舌，只要高洋有这个心思，他们就一定能成功说服高洋称帝。
他们知道只要高洋称帝，自己就是首功从龙之臣，以后高官厚?就大大的有了。
于是两人整天在高洋身边转来转去，抱着一个乌龟壳子不停地算卦，今天说是卦象大吉，明天又说《易经》有云\"时乘龙六以御天\"，把高洋馋得抓耳挠腮，就像一只吃不到桃子的猴子。
高德政也天天聒噪，并亲自跑回邺城，拉拢了杨愔、张亮、赵彦深等人，大家一起为齐王登基抬轿造势。
此时的高洋已经在高德政等人的撩拨下，下决心自立称帝，不管是谁再劝，统统乱棒打出，即使是母亲娄太妃也不行! 高洋的狠劲一上来，他是六亲不认的。
几天后，高德政还未从邺城返回晋阳复命，高洋已经离开了晋阳，率领大队人马向着邺城而来了。他是准备尝一尝摘桃子的滋味了。
高洋在去邺城的途中，行至平都城（山西省和顺县），他再次召集从外地而来的勋贵武将们商议禅让的事，大家听后都大惊失色，但又不敢再提出反对意见，因此众人都默不作声。
高洋见到这种情形，就端坐在主位上瞪着大家，一众地位显赫的文臣武将个个都低下头来不敢表露自己的表情。
只有长史杜弼静静地移近到高洋的身边，他暗中对高洋说：
“敢问大王，关西是我国的劲敌，如果现在接受了魏帝的禅让，恐怕西魏就会以此为借口，趁机发难，挟天子发兵东伐来进犯，届时大王将如何应对？”
高洋听后站起身来走入内室，把杜弼和徐之才二人召入，将杜弼刚才的话说与徐之才听，徐之才就说：
“禀大王，依臣下的愚见，如今关西的宇文泰欲与大王争夺天下，其目的也是想自己称帝的，这就好比是在草地上追逐一只兔子，只要其中有一个人抓住了，其他人也就不再有念想了。
因此，如果大王先接受了魏帝的禅让，关西那边自然也就只能放弃这个念头了。即便他们不愿意放弃，也只当是逼我们称帝，必须见机行事，绝不能落在后面去学别人。”
杜弼听了徐之才的话后无言以对。
在回邺城前，高洋早已经给邺城的其他重臣如太尉高岳、尚书令高隆之、领军娄睿、侍中张亮、黄门侍郎赵彦深等人都写了信，大家回信时异口同声都对禅让称帝的事表示反对。
当高洋一行人走到辽阳驿馆时（今山西省左权县），司马子如亲自来到面见高洋，坚决反对他想行禅让称帝的事。
高岳等人也飞马赶来辽阳驿馆，对禅让称帝的事纷纷持反对意见。高洋见得不到重臣们的支持，就派人去制止高岳等人再来劝阻，他说∶
“本王知道诸位大人的心思了，你们不必再来劝说了。”
之后，高洋只让杨督来面见，其余等人只好返回邺城。此事给高洋的打击太大了，不仅母亲不看好自己，几乎所有的权贵也都是如此，此举让高洋感觉是被人在头上浇了一盆冷水，顿时心灰意冷。
另外，又有人向他进言说周武王也是两次来到孟津，然后才禅代成功的。
高洋听后就认为也应该学学圣人周武王的谦让，于是，他只好无可奈何又折返回了晋阳。
其时仓丞李集有点不识时务，他对高洋说∶“大王来到这儿打算做什么的？为何又要回去晋阳？”
高洋正懊恼着，被他问得有点哭笑不得，内心非常生气，就假装派他去东门办事，然后派人把他杀了泄愤，之后又假惺惺地赏赐给他十匹绢，然后，才起程折返晋阳。