在杀了郭祚和裴植，罢免元雍后，北魏朝廷的诏命和生杀之权都出自于忠之手。此时的于忠不会想到，自己至高无上的日子并不会持续太久。

由于高太后被迫出家为尼，延昌四年（南梁天监十四年，公元515年）八月丙子日（初六），元诩的生母胡太妃成为了北魏新的皇太后，并住进了崇训宫。作为胡太后的恩人，于忠担任崇训宫的卫尉，刘腾担任崇训宫的太仆并加官侍中，侯刚为侍中抚军将军，胡太后的父亲胡国珍则被任命为光禄大夫。不久后清河王元怿被晋升为太傅并兼任太尉，广平王元怀被任命为太保兼任司徒，任城王元澄担任司空。次日车骑大将军王忠被任命为尚书令，特进崔光为车骑将军，并加封开府仪同三司。一切到这似乎都还算正常。

可朝中诸位大臣也不傻，虽然此时于忠权势滔天，但皇帝元诩毕竟还是有亲妈在的，于是众人一合计，集体上书请求胡太后临朝称制，暂行行皇帝的权力。当年九月，胡太后开始临朝听政，但并不称“制”而称令，而大臣们上书仍称呼她为殿下。胡太后这人也是十分聪明机智，平日非常喜爱读书写作，同时也擅长射箭，因此很快一切政务都由她亲手批阅处理。胡太后也深知自己人的重要作用，便提拔胡国珍为侍中，并封为安定公。

胡太后掌权，最大的失意者自然是于忠，原本他还可以假借皇帝之名耀武扬威，可随着胡太后执政，他便失去了权力的法理性，很快于忠就被解除了侍中、领军、崇训卫尉的职务，只保留了仪同三司、尚书令。对于忠来说噩梦远没有结束，又过了十几天后，胡太后把门下侍官叫到崇训宫，向他们询问于忠的名声如何？得到的答案自然是于忠不称职。于是胡太后决定将于忠外放任都督冀、定、瀛三州诸军事，征北大将军，冀州刺史。至于尚书令的职务则交由司空元澄兼任，元澄也不傻，立刻上书给胡太后，建议让胡国珍可以出入宫禁并参议重大事务，这一请求自然很快被批准了。

于忠虽然被外放，但对他的清算却还没结束。先前于忠掌权时，曾胁迫元雍等人对其加封，因此北魏朝廷被迫封于忠为常山郡公。但于忠却又不敢独享这一荣耀，就示意给在门下省的人一同增加封地，崔光因此被封为博平县公，为此尚书元照等人不断地上书投诉。如今胡太后命令大臣们再次商议此事，太傅元怿等人上书认为，迎接新主、保护防卫，本是作臣子的正常职务，不应当把这个当作功劳。之前之所以授予于忠封地，只是因为畏惧他的权势。几人一合计认为把于忠功劳和过失相抵，完全不应赏赐，并请求全部追还封赏，胡太后最终采纳了这一建议。

于忠倒台后，昔日被他打倒的高阳王元雍也趁机上表揭露于忠的罪状，并表明自己没能加以纠正，请求仍放回家去。面对元雍的这一行为，胡太后感激于忠先前有保护她的功绩，便不再追究于忠的罪行。至于元雍，胡太后任命其为侍中、太师，兼任司州牧，不久又重任录尚书事，和太傅元怿、太保元怀、侍中胡国珍居住在门下省，一同治理朝政。

通过以上行为，很多人可能觉得胡太后不简单，可能是冯太后第二。可实际情况是胡太后的野心可远在冯太后之上，当时元诩还年幼不能亲理朝政，但进行祭祀之事还是没问题的，可胡太后连这都想代劳，礼官多方议论后认为不可以。但胡太后并不死心，询问了同样被退还封赏的侍中崔光，崔光引用汉朝和熹邓太后祭宗庙的旧事认为可行。这让胡太后很是高兴，于是代行祭祀的事务。这样一个有野心的太后把持朝政，北魏又将走向何方？