怎么倒张呢？司法官员先从经济案入手。长安四年（704年），在自己的侄子梁王武三思的建议下，武则天在万安山修建兴泰宫。二张党羽揽下工程，由李迥秀主持修建。我们刚才说了，李迥秀没什么操守，为了当官，不惜给一个鸡皮鹤发的老太太当情夫，现在得到这么一个美差，有油水，能不利用吗？使用质次价高的建筑材料啊，收受承包商贿赂啊，弄一堆豆腐渣工程啊，今天我们能想象的问题，李迥秀都没少干。但出了经济问题谁也保不住，这一下就被司法部门抓到把柄了，弹劾他贪赃受贿。人赃俱在，李迥秀当即被罢相，到地方当刺史去了。倒张派搞掉李迥秀，一方面是敲山震虎，吓唬一下张家兄弟，取得心理攻势；另一方面，也确实剪除了他们的党羽，逐渐削弱了他们的势力。
但是，二张兄弟并没有收敛。相反，他们还顶风作案，又插手另一项大工程。当时，也是在武三思的建议下，武则天准备修建一尊巨佛。为此，国家财政部门还专门向天下的僧尼征收了十七万余贯的捐款。二张兄弟觉得这是个发财的机会，马上开始做起了木头生意，自己贩运木头，然后高价卖给工程方。这一票生意，终于把他们也给赚进去了。
长安四年（704年）七月，有人状告二张的三个弟弟张同休、张昌期、张昌仪贪赃受贿。于是，这小哥仨被收监候审，先进去了。审了一夜之后，二张兄弟就被兜出来了，张易之、张昌宗兄弟也被立案审查。几天之后，司刑正（大理正）的判决结果下来了，说张昌宗强买人田，按律可以罚铜二十斤抵罪。这个判决是轻还是重？轻，太轻了，是大事化小的做法。贪污受贿的大案审成了强买人田，而且只罚二十斤铜，这对于张昌宗算得了什么啊？武则天一想，这个司刑正很会办事，马上批准了，没当回事。但是倒张派的司法官员哪能善罢甘休啊？四天之后，御史台拿出了复核的意见：“张家兄弟贪污赃款合计四千余缗，数额巨大，不是罚款就能解决的，按照法律，张昌宗应当免官。”