康熙四十二年五月，才过了皇帝万寿，便有监察御史举报索额图在德州照顾太子的一个多月里，肆意妄为，所行之事多有逾越之处。
御史奏折中称：索额图乘马直达太子住所中门才下，此举若论法理，乃是死罪，但胤礽却不加罪责。
而胤礽本身，在德州所用之物都是黄色，其他的仪注也都仿造皇帝，超过太子本分。另外，两人在德州大肆收取官员贿赂，纵容门人横行，甚至发生过因争抢妓女发生口角打死人的事情。
种种不法之事，康熙得知后十分震怒，下令严查。
五月十九日，以“议论国事，结党妄行”的罪名将索额图交宗人府拘禁，称其为“天下第一罪人”，并发上谕加以斥责：
“尔任大学士时，因贪恶革退，后朕复起用，尔并不思念朕恩，即若养犬，尚知主恩，若尔者，极力加恩亦属无益。朕差人搜与尔行走之江潢家，得书宇甚多。朕亦欲差人到尔家搜看，但被尔牵连之人甚多，举国俱不得安，所以中止。朕若不先发，尔必发之，朕亦熟恩之矣。朕将尔行事指出一端，就可在此正法。尚念尔原系大臣，朕不忍心，但若著尔闲住，又恐结党生事，背后怨尤议论，著交宗人府与根度一处拘禁，不可疏放。”
我不知道皇帝对于索额图的图谋究竟知悉了多少，但是，从他下令：将索额图和家人全部圈禁，其同党额库礼等人也加以拘禁，这些人的子孙，凡在朝中任职的全部革退等一系列举动看，他是下了决心，要将索额图的党羽一网打尽了。
索额图倒台，一时间朝廷里人心惶惶，但却无人跟风揭发。倒不是索额图人缘好，而是大多数官员都还在观望。他们担心，以索额图与太子的亲密关系，日后太子登基，自己会成为清算对象。
显然，百官的沉默无法令皇帝满意，他盛怒之下，命三阿哥胤祉、八阿哥胤禩负责收集索额图的罪证，迫使其认罪。