得势的李义府如同一只充了气的气球，在站队成功后节节攀升。显庆元年他兼任太子右庶子，并受封侯爵。太子右庶子即太子宫事务署署长，太子宫两大领导之一，能得到这个职位，说明皇帝对李义府无比信任，因此才会派给太子。得势又得意的李义府由此忘了形，不久便制造了一出疑案。他居然把手伸进了大理寺监狱！事情的起因是这样的，显庆元年，大理寺监狱关押进一个女犯人，女犯人姓淳于，因为犯了案子被关进大理寺监狱。淳于氏被关押不久，李义府就将手伸了进来，他授意大理寺丞毕正义将淳于氏无罪释放，然后将其接到了自己的一处别院。李义府为什么会把淳于氏从大理寺的监狱里捞出来呢？这完全是因为淳于氏貌美如花，李义府起了色心，就想把淳于氏收为自己的偏房。李义府以为做的神不知鬼不觉，可是还是让人知道了，知道这个秘密的人就是大理寺卿段宝玄。段宝玄原本知道淳于氏犯案羁押狱中，没想到不久之后竟然被毕正义无罪释放，而且还被接到了一处别院，这里面藏着什么猫腻呢？段宝玄将自己的疑问写成奏章，上奏给了皇帝李治，李治派人追查，案子由此发了。
不过李义府并不慌乱，反正到目前为止，只是追查到毕正义这一环，要查到他，还早着呢。可是，如果毕正义指证李义府呢？不必着急，你见过死人指证吗？在李义府的安排下，毕正义自杀了，从自杀的结果来看，可能是心里有鬼，畏罪自杀。然而，即便毕正义自杀，人们还是把矛头指向了李义府，他与毕正义以及淳于氏的关系已经成了众所周知的秘密，不是一个毕正义自杀，就可以掩盖所有的一切。大家在等待着李义府得到应有的惩罚，然而却迟迟没有动静，原来李治也知道其中的秘密，但是他护着李义府，并不想予以处罚，只想就这么算了。皇帝装起了糊涂，御史们却不糊涂，很快，侍御史王义方站了出来，对李义府进行弹劾。朝堂之上，王义方与李义府对质起来。王义方义正词严，三次呵斥要李义府退出，因为按照惯例，为了保证弹劾的效果，被弹劾的人需要离开现场。李义府站在原地，赖着不走，他期待着李治能发话让他留在原地，然而皇帝也要遵守规则，碍于此，李治没有发话。无奈，李义府还是悻悻而去。王义方开始了自己的弹劾，说的义正词严，有理有据，不过在说到李义府仕途的起步时，王义方的用词有些狠，他说李义府是因为容貌得到了马周和刘洎的宠幸，因此才得到了重用。
除此之外，王义方的弹劾均言之有物，在场大臣内心都赞同王义方，只是都没有表现出来。弹劾完毕，李治出离愤怒：太不像话了，这样的人不处理怎么行！王义方出言不逊，侮辱高官，即日起贬往莱州，出任司户（管理户籍的官员）。闹了半天，被贬的居然是王义方。黑白颠倒。在王义方弹劾失败后，李义府还是没有忘了羞辱王义方一番。李义府趾高气昂地问：“王御史，你那么狂妄地弹劾我却没有任何结果，难道心里不惭愧吗？“王义方针锋相对地回应：“孔子在鲁国只担任了七天司寇，就能把少正卯诛杀，我王义方担任御史有些日子了，却不能为国铲除奸佞，这一点确实有愧！““你！“李义府被噎住了，不过转念一想又释然了，你王义方除了能逞口舌之快，还能做什么？反正我现在很红。李义府确实很红，不久他又兼任太子左庶子，太子左庶子是太子宫政务署署长，太子宫最大的官员。一年后，很红的李义府出任中书令，同时代理御史大夫，同时监修国史，同时还是弘文馆学士。不久又加官太子宾客，进封河间郡公。显庆三年，李治又追赠其父李德晟为魏州刺史，所有儿子都位列高官，就连尚在怀抱的孩子，同样也有一顶官帽，同时李治下诏为李义府在长安最好的地段盖一所房子。恩宠无以复加，无人可比。
