在矾书案破案以后，康熙对于胤禩的忌惮再一次超越了废太子胤礽。虽然在康熙五十四年，康熙在年初的时候已经随便找了个“胤禩惫懒，不堪大用，不从事政务”的理由停发其俸禄，但谁都知道，胤禩“不从事政务”其实是康熙对胤禩心有防备，不再给胤禩政务，生怕胤禩再处理好了几个任务，把他这个皇阿玛取代了！
而且事实是，虽然胤禩作为八贝勒的俸禄是很丰厚的，通常来说停发俸禄也会是一个很严酷的惩罚，但对于胤禩来说，停发俸禄除了被打脸丢面子以外根本就是不痛不痒。作为八爷党的首领，胤禩根本就不缺那点钱，康熙也没想到的是，胤禩被停发俸禄以后，“八贤王被皇上打压”的名声传得更广了。康熙私底下出去微服私访的时候，听到民间对胤禩的称谓都是“八贤王”而不再是“八贝勒”“八阿哥”，此时的康熙心里对胤禩产生了强烈的恐惧。
哪怕之前胤礽在做太子的时候，康熙恐惧胤礽获得美名从而取代他，他也是有办法打压胤礽的。胤礽的真正亲信除了索额图一家外就再也没有了，在索额图死后，胤礽更是逃不脱他的手掌心，他多次放纵别人败坏胤礽的名声，这样一来，就能稳固他这个皇阿玛的地位。
但胤禩不一样，康熙悄悄也对胤禩搞了一些舆论战，就比如说年初时剥夺胤禩的俸禄这件事，他当时也找了几个托去说胤禩的不是，但对胤禩完全没有任何作用。康熙深知，胤禩不同于胤礽，他的势力盘根错节，党羽众多，民间又有“八贤王”的美名，自己以往对付胤礽的手段对他根本不管用。
正在康熙为此苦恼时，有大臣密奏，称胤禩私下与几位手握重兵的将领来往密切。康熙心中一惊，这若是胤禩暗中勾结武将，意图谋反，那后果不堪设想。于是，康熙表面不动声色，暗中派人监视胤禩与那些将领的一举一动。
好在经过康熙的调查，这只是胤禩在带着胤祯串门子，向武将们学习带兵打仗，在八爷党众人看来，策妄阿拉布坦的征讨事宜早晚要落在胤祯头上，所以胤禩与武将们走动的次数多了很多。
即便康熙调查出来是安全的，他心里也还是慌了，胤禩在他还没注意到的时候就可以和武将走动，要是胤禩真的心态变了要学李世民政变，就是要弄死他取代他，那还得了？