盛于嘉靖三十二年（1553）上疏弹劾严嵩十大罪，主要有：俨然以丞相自居，坏祖宗成法；伺世宗之喜怒以恣威福，窃君上之大权；让严世蕃代为票拟，纵奸子僭窃权柄；子孙无功而官，冒滥朝廷军功；纳贿营私，引用奸臣；戒守将勿击俺答，误国家军机；中伤天下善类，专黜陟之权……疏上，严嵩唆使世宗廷杖一百，并投入大狱。又操纵刑部，判处绞刑。然世宗犹未欲杀之，下狱二年不执行。嘉靖三十四年（1555），严嵩搜索必能批准处决之案，附杨继盛之名并奏，乃被弃西市。

严嵩擅权久，最后仍不免失宠于世宗。其失宠有一过程。

初，严嵩握权，遍引私人居要地。世宗渐厌之，而渐亲徐阶。徐阶亦善于撰青词，故得世宗宠幸。嘉靖三十一年（1552）三月，徐阶得以礼部尚书兼大学士参与机务。三十七年（1558），徐阶门生吴时来、门生张狲、同乡董传策同日弹劾严嵩。严嵩密请追究主使者，然无所得。世宗乃不问而慰留嵩。此后，世宗对严嵩的行为渐生怀疑。

其时严嵩妻病死，严世蕃当护葬归。严嵩不能一日离其子，请求世宗同意由其孙严鹄代行，严世蕃仍留京城。因能干预各司事如故，然已不能入直房代父票拟。有时遇情况紧急，文书飞至，而严世蕃正与诸姬狎客寻欢作乐，不能及时解决。严嵩无奈，每自己动手，则又往往不能合帝意。明世宗对严嵩之不满于是更为加深。