徐有功被贬之后，李义府认为除掉一块绊脚石，便肆无忌惮、目无法纪，更加猖狂，仰仗武则天的势力，专营害人利己之道、贪赃枉法之事，“专以卖.官为荣”将国家制定的考官程序和选官标准破坏殆尽。
唐高宗对李义府的骄奢yin.逸、索贿受贿、营私舞弊、贪赃枉法之事，也早有耳闻，曾等告诫他；听说你的儿子、妻子、女儿、女婿都仰仗你的势力，目无法纪，索贿受贿，做了许多有损于国家、人民的坏事，我也多次为你们掩饰，没有向外公布，你应当收敛、克制自己。
可李义府倚仗有武则天为后台，不但不向皇上请罪，反而质问唐高宗从那儿听到的有损我名誉的消息，最后缓步面出。
正当李义府得意忘形之时，有一yin阳占卜的人杜元纪来到他家说；大人家的宅第“狱气”需要拿出两千万钱，才能消灾，李义府不但不相信，反而更加不择手段、猖狂地聚敛钱财。
公元663年，左金吾仓曹参军杨行颖上书陈述李义府的种种罪行，高宗诏令司刑太常伯刘祥道与侍御史查办李义府案，派司空李勤为亲差大臣督办，经认真核实，李义府所犯罪行属实、证据确凿、事实清楚，由于李义府胆大妄为、无法无天、践踏法律，已涉及到高宗统治地位的安危，高宗才痛下决心以除毒瘤，以“卖.官鬻爵、贪赃枉法、破坏朝纲、害国害民”之罪，削除他的一切官职，从他的家中抄出大量的金银珠宝，全部归公，将他长期流放在四川西昌。
李义府的长子李津，仰仗其父的势力，到处招摇撞骗、欺男霸女、索贿受贿、坑害百姓为非作歹，被弹劾后，流放在海南岛崖县，次子李治、三子李洋、女婿柳元贞，均因贪得无厌、仗势欺人、无法无天、干尽坏事，而被罢官撤职，长期流放在广西天峨山东北。
现而今，历史虽然已经改变，可是一个人的本xing却不是那么容易改变的，李义府之前之所以不贪，那是因为他自己知道，他现在的功名来的不正，而且已经恶了李承乾，所以必须做做样子，就算是再怎么心疼，那些送上门来的金珠宝贝也只能拒之门外，可是如果是个胡商的话，那可就不一样了。
胡商来找他，无非就是希望拿到几张平引，大唐律法规定，外商贸易，全需平引，这个平引的作用，主要就体现在对一些不能出口物件的管制问题。
李义府想当然的也就以为，这个胡商肯定是来找自己办这种事的，他现在在户部任职，这方面的事情，正好归他管理。
“将人带到我的书房中去！”李义府说出这句话的时候，声音都在打颤，就好像已经看见了满箱的金银珠宝一样。
李义府到了书房不久，那个胡商就在下人的带领下来了。
李义府抬眼轻飘飘的一看，道：“你是何人，来找本官何事？”
那个胡商对着李义府行了一礼，笑道：“在下阿拉伯帝国东方总督易布拉西?默罕默德大人麾下哈马德！”dd