许敬宗按武后的意思上奏李治：
“太子李忠出身寒微，前因无子可立，暂时立为太子。
如今国家已有正统传人，李忠本人必定惴惴不安。
应趁此另行确定名分，共图保全。”
太子李忠听说许敬宗这样劝说皇上，知道自己的太子位保不住了，无可奈何入宫见李治说：
“父皇，如今已有皇后正传皇子，儿臣请求辞去太子位。”
李治于是降李忠为梁王，立武皇后的儿子李弘为太子。
追赠武皇后的已故父亲武士彟为司徒，立武皇后的母亲为代国夫人。
这时褚遂良已往潭州，刚要去上任，又奉诏命调往桂州。在桂州任内，又被贬为爱州刺史。
侍中韩瑷、中书令来济一同被贬，韩瑷被贬为振州刺史，来济被贬为台州刺史。
武皇后还不罢休，又授意许敬宗、李义府两人，要把长孙无忌以下全部贬死，这样才能消除当初长孙无忌阻碍立她为皇后的痛恨。
只因长孙无忌是李治亲舅舅，有佐命大功，一时扳不倒，还需等待时机。
李义府品行不端，贪财又好色，因洛州一案差点丢官。
洛州妇人淳于氏，是个靓丽美艳的少妇，她伙同奸夫谋害亲夫，被关进大理寺监狱。
李义府听说她长得比西施还美，商量大理丞毕正义，暗中把她释放出狱，李义府纳她为小妾。
毕正义做得不够保密，闹得不少人知道了这事。
正卿段宝玄见执法者徇私枉法，心中愤恨不平，写奏章密告李治。
李治命令给事中刘仁轨、侍御史张伦复查此案。
李义府害怕毕正义说出实情,想杀人灭口，竟然逼着毕正义上吊自杀了。
李治知道毕正义自杀是李义府逼迫的，打算追查到底。
这时武皇后出面袒护阻拦，说：
“李义府是心腹重臣，不可因一件小事坏了他的名声。”
李治又因为毕正义已死,死无对证,只好作为悬案搁置，不再追查。
侍御史王义方一身正气，嫉恶如仇。他想要递奏章弹劾李义府，只因家有老母亲，写好了奏章没有递交。
王义方因这事对年迈的老母亲说：
“您儿子当着御史，职责是弹劾、纠察违法官员的。
如果坐看奸臣破坏法规，不加弹劾，是我对国家不尽忠。
我怕如果弹劾不管用，扳不到当权的坏人，反而给自己招来灾祸。
我自己丢官罢职，被杀害死了没啥，担心连累我的娘亲随着我遭难。
这又是对母亲不孝敬，正在左右两难。”
老母亲表情严肃地说：
“我听说汉朝王陵的母亲，用剑自杀成就儿子的义举。
你如今能为国尽忠，我就是死了也没有遗憾。”
于是王义方心情坦然入朝，当面奏请皇帝李治：
“李义府逼杀六品大理丞毕正义，该不该判罪？”
李治还没说话，李义府便从侍臣队列中跨出一步斥责王义方：
“没有这回事！你胡说八道。”
王义方说：
“这事证据确凿，你李义府要自我辩解，完全可以在大理寺衙门里作为犯人辩解对证。
你没有资格还在这在朝堂上胡言乱语。”
李义府还不肯退下，王义方大声呵斥：
“你赶快滚下去！”
李义府不肯退，王义方又喊：
“你作奸犯科，没有资格站在这里！”
李义府还是不走。赵王义方再喊：
“赶紧滚下去！！赶快滚！快滚！”
李义府才很不高兴地退出。
王义方对着皇上和满庭群臣，高声朗读他写的弹劾李义府的奏章：
“黄鹂鸟婉转鸣叫，春天就来了。
蟋蟀晚上唧唧吟唱，秋天就来了。
这些鸟虫虽小也知道顺应时节。
人虽微贱，也能说话忠诚。
我去年初冬还当云阳县丞，今年夏天，皇上又让我当侍御史。
我割下头来也无法报答皇上恩情，只要发现谁犯法就决不隐瞒不报。
近来有李义府为了毁去能揭发他犯罪的证人，逼得大理寺毕正义上吊自杀。
听说皇上已放过了他，但是朝堂不应是奸臣恶人的苟且藏身之地！
当今陛下继承圣人事业，恩推天下，安抚万国。连少数民族居住的偏远山村，都敬畏大唐律法。
何况在首都，在天子的眼皮底下，奸臣恣意横行暴虐，足令忠臣怒颜激愤，义士挥舞胳膊痛恨！
毕正义往房梁上挂根绳子，又含泪套在自己脖子上，脚下的凳子一蹬，结束了自己的生命。
他完全是畏惧李义府的权势官威，才无奈杀身。
这样的逼死人的官威不是出自国君，是出自一个叫李义府的宠佞奸臣！
应该为毕正义洗雪冤屈，诛杀奸臣李义府于光天化日。
李义府无耻卑劣到了什么程度？
那个被李义府看上的年轻美貌女罪犯淳于氏，只有一张俊俏的脸。
她伙同奸夫谋杀亲夫，心灵肮脏狠毒。她献身丈夫在前，后又委身奸夫在后， 身体也肮肮不堪。
这样心灵和肉体都肮脏的女子，被李义府当做宝贝，私藏在宅府里充当小妾，他和她发生肌肤之亲。
可见李义府内心多么肮脏无耻！
这样无耻的人还冒充国家栋梁，人模狗样站在朝堂 ！这是国家之耻， 朝廷之耻！”
王义方义正辞严一口气念完，朝臣们都窃窃私语地议论李义府的卑鄙无耻。
李治听了也觉得尴尬难堪，又不好制止他，直等他念完。
李治听完说了一句：
“毁辱大臣。”
就离开朝堂，起身回了内室。
没多久就有圣旨传出，贬王义方为莱州司户。
李义府仍逍遥法外，随后不久，李治又进封李义府为中书令，兼御史大夫，让他和长孙无忌、许敬宗修订礼仪。李义府官威显赫如旧。
被贬官外放的王义方领着老迈母亲和妻室儿女，雇了两辆马车，从长安去遥远的山东莱州赴任。
王义方一路上感触万千，写了一首诗抒发情怀，这首诗叫做《被谪》。诗里说：
“孤臣长抱杞人忧，
沥血陈言叹未投，
一点丹心终不冷，
梦魂常在帝京游。”
他处江湖之远则忧其君，被贬官仍不后悔。在莱州他为官清正，爱惜百姓。
任期结束，他搬家到山东昌乐县兴办学堂， 靠教书谋生，当地百姓没有不夸他的。