当时朝有正臣，对魏忠贤的势力逐渐膨胀多感不安，但用人之权在皇帝手里，熹宗唯妇人之言是听，所以驱逐客氏为去邪的第一要着。在皇帝大婚前，言官请逐客氏，熹宗答应在光宗下葬后办理，原是客氏与魏忠贤的缓兵之计；到了九月，光宗庆陵告成，奉安事毕，大学士刘一燝奏申前请，熹宗迫不得已，只好让客氏出宫回家。按：在明朝，北平城内地名分为坊、铺、胡同与街，据《酌中志》，客氏家住正义街，不知在哪一坊，相传北平西城的丰盛胡同原名奉圣胡同，即以客氏而得名。
客氏一出宫，据《明史》记载：熹宗“思念流涕，至日旰不御食，遂宣谕复入”。此事与唐明皇生杨贵妃的气，把她遣回娘家，结果食咽不下，非召杨贵妃入侍不可，其事如出一辙。星相书上有“墓库运”之说，杭州人称惑于女色而荒废正业者为“墓库”，晚年的唐明皇是“老墓库”，而熹宗是“小墓库”；老墓库不过失去皇位，小墓库则失掉皇朝——明朝最后一个可望延长国祚的机会，就在小墓库这一把眼泪鼻涕中断送掉了。
这话怎么说呢？因为熹宗如无客氏，脑筋还是相当清楚的。举个例说，他对刘一燝他们这班正色立朝的辅臣是相当敬重的，如无客氏的蛊惑，魏忠贤心存忌惮，还不敢过分胡作非为。而在外廷的正人君子要取得熹宗的信任，必先逐去客氏，把魏忠贤孤立起来，然后才可以裁抑他的势力。于今所谋落空，要制服魏忠贤就很难了。
客氏的出而复入，比一直不曾出宫还要坏。因为一直不出宫，究不知“圣意”如何，也许天威不测，有一天会生剧变，则客、魏不得不有所顾忌，不得不加收敛；但经过这一次的测验，熹宗的感情状态固已深切明了，而外廷群臣的正论毕竟不能对抗皇帝的权力，这一点亦已彰明较著，如是客、魏及其党羽便得到了一个有力的启示，也找到了一条“正确”的路线：只要维系住熹宗的感情，什么事都可做，不必怕！
当然，有人对此事要说话，第一个是给事中侯震旸，他说：“徘徊眷注，稍迟出入，犹可言也；出而再入，不可言也。幺麽里妇，何堪数昵至尊？”