后来，武帝略知太子东宫所为，又想起侍中谢晦的“醉言”。闲居时，武帝召谢晦到太极殿西堂，摒退左右，重提宴会时事。谢晦说：“陛下春秋已高，应该为万代作长久计。神器至重，不能让非才者继承。如今像太子这样……”武帝又问：“庐陵王如何？”谢晦请求允许自己去东府看一看。后二日，谢晦乘牛车到司徒府东府城见义真。义真与谢晦谈论文史，古往今来滔滔不绝。谢晦多听而少言，日暮时分入宫见武帝：“庐陵王才有余而德不足，不堪主神器！”神器，指皇位。

这中领军乃是保卫京师的将军，而侍中又是直侍皇帝左右掌管奏事的亲要，加之谢晦一向紧紧追随自己，所以谢晦的话武帝是声声入耳，句句在心。不几日，朝廷就出义真外任为南豫州刺史，镇守历阳。

武帝驾崩，义真在历阳又多向朝廷求索财物，执掌朝政的徐羡之等人常裁减其所求，于是义真怨怒至于责骂，并上表求还京都，认为历阳不堪居处。

那时候少帝失德，徐羡之等密谋废黜他。若废少帝，按兄弟行次就应该立义真；但义真既然所言所为如此，不堪任社稷，又因武帝过去曾经打算立义真的事后来被少帝知道了，少帝怀恨在心，并对左右侍从扬言要如何如何，从而构成兄弟之隙。徐羡之乘此兄弟之隙，利用少帝不亲理政事而委政大臣的机会，于二月初一下诏废义真为庶人——由诸侯王一下子变成了普通百姓，并把他流放到新安郡（在今浙江淳安）。

五月二十日，徐羡之等人依过去废黜皇帝的故事，使帝母皇太后令，宣布少帝过失，废黜他为营阳王；六月二十四日，兄弟二人分别被从皇都派出的二路使者诛杀于吴县和新安。

二王既被杀，下还是不下？宜都王刘义隆的僚佐们各陈利害。

长史王昙之兄王弘是宫中统率宿卫营兵的卫将军。王昙先陈述符瑞之征：

“年初，江陵城上有紫云，望气者皆认为是帝王之符。另外，江陵西至上明，东至江津，其间江中有大小九十九洲。楚地谚语说：洲满百，当出王。今忽有一洲自江中露出。这都是殿下龙飞之应。”龙飞之应就是要当皇帝了。古代谁要是想当皇帝，就一定要弄一些符瑞之征，以应君权神授的鬼话。

“附会之说，”宜都王摆手阻止他，声音变得更小，“附会之说。”

为了掌控南部蛮民，朝廷在江陵设置南蛮校尉——它的官品和刺史一样是四品。南蛮校尉到彦之说：

“二王已薨，朝中奉迎殿下用心如何，是否有诈，尚不得知。不如坚守荆州以观朝中变动，暂不可匆忙而下。”

“不然，”司马王华接过到彦之的话，“先帝有大功于天下，四海叹服。如今少帝失德，但人望未改。朝中执政五人，下官在此为殿下一一分析。王长史之兄是徐、傅等从江州刺史任上征调回京的，他不是谋，檀道济也是刚从南兖州刺史任上被征调回京的。檀虽有干略，并拥有兵众，但他也和王弘一样，都因是先朝旧将，名望大，徐、傅等召他们不过是要以他们的名望来压服人心。此二人不足虑。另外三人，徐羡之中才寒士，傅亮布衣书生，无司马懿、王敦篡夺之心是很清楚的；谢晦年少，虽多次随从先帝征伐，又识机变，但他难以凌驾于徐、傅二人之上。徐、傅等受托孤任重，不敢转身背德，只是畏惧庐陵王严刻专断，担心将来无容身之地，又因殿下宽厚仁慈，有名望，朝野远近所知。况且越过兄弟行次而千里奉迎，也正表明他们希望展露废立之美德。今江陵士民人心不定，议论纷纷，但势必不然。再说，徐、傅五人功位并同，谁肯相让！纵有一二敢图谋不轨者，其势必不能行。废帝若存，徐等害怕将来受祸，因此加以杀害；杀二王，皆因诸人贪生怕死，并非敢心怀逆谋，不过想握重权以自保。殿下应该顺流而下，以副天下人所望！”

王昙极力赞同：“他人不敢说，家兄志趣异于徐、傅。纵有阴谋，家兄定不同！”

宜都王沉默良久，然后起身，走到王华、王昙座前：