能够获得最高统治者的肯定，严嵩自己也有些飘飘然了，开始露出庐山真面目。他虽然入了内阁，但不是首辅，前面还有资格更老的翟銮，以及吏部尚书许赞、礼部尚书张璧，严嵩想当首辅呀，必须给他们点颜色看看。怎么拿下翟銮呢？他私下里委托与自己关系好的言官上疏弹劾，朱厚熜相信了，翟銮获罪离开。至于许赞、张璧，严嵩根本不让他们俩参与票拟，内阁官员的权力，都被严嵩一个人行使了，弄得许赞很有意见：“何夺我吏部，使我旁睨人”，只能看着你票拟，我跟个观众似的。严嵩为了表现自己关爱同事，上疏皇帝，请求每次召见时，他能与成国公朱希忠、京山侯崔元及许赞、张璧一同进来。朱厚熜虽然没有接受，心里却更加赏识严嵩，又把他的职务调整为吏部尚书、谨身殿大学士、少傅兼太子太师。
没过多久，朱厚熜了解到严嵩专权的行为，又开始怀念起了夏言，内阁的权力都被严嵩行使了，他这样排斥异己，久而久之，会对皇权形成威胁。还是应该把夏言叫回来，好好治一治严嵩，保证内阁权力的平衡。嘉靖二十四年（公元1545年），夏言又一次回到熟悉的岗位，嘉靖皇帝让他官复原职。他一上任，就对严嵩下手了，把严嵩安插在各部门的亲信都给赶走，同时还掌握了严嵩儿子严世蕃的罪状，想要弹劾他。严氏父子得知后，吓得惶惶不可终日，赶紧跟夏言求饶，夏言懒得理他们，装病不见。严嵩花重金买通了夏府的仆人，直接来到夏言面前，痛哭流涕，百般求饶，希望夏大人高抬贵手。严氏父子卑微地跪在膝前，夏言总算满意了，你也有今天！大人不记小人过，你们放心吧！与此同时，锦衣卫都督陆炳也不干净，被御史弹劾，夏言要求他说明情况。陆炳怎么说都无法掩盖自己的罪行，也跑到夏府跪求，同样，夏言饶过了他。但陆炳和严嵩都感觉很羞耻，必须报一箭之仇，于是他们结成了政治同盟，想要联合起来扳倒夏言。