对于在此以后严嵩的专权，也有学者提出了不同的意见。他们指出，事实上，在朱元璋于明朝初年废除宰相职位以后，明朝的内阁首辅权力并不大。根据《明史·严嵩传》的记载，严嵩任首辅后，“帝虽甚亲礼嵩，亦不尽信其言，间一取独断，或故示异同，欲以杀其势。”这说明当时的嘉靖皇帝虽居大内，却是紧握皇权的。王世贞《嘉靖以来内阁首辅传》也说；“（世宗）晚年虽不御殿，而批决顾问，日无停晷；故虽深居渊默，而张弛操纵，威柄不移。”因此，严嵩“窃弄威柄”的可能性是很小的。有一次严嵩的亲家都察院左都御史欧阳必进想做吏部尚书，虽然经过严嵩哀求再三，但世宗也仅让欧阳做了半年的吏部尚书便将他罢职了。可见，严嵩即使想安排一下儿女亲家都不容易，更不用说把持朝政、结党营私了。
另外，由于当时的嘉靖皇帝崇奉道教，因此力赞玄修、进献青词几乎是担任阁臣的必要条件，所以“谀”、“媚”是阁臣们的共性，而严嵩并不见得比别的阁臣更谀更媚。相反，在一些事情上，他还往往能够坚持自己的意见。比如，有一次世宗居住的西苑永寿宫发生火灾，世宗打算重修宫殿。严嵩考虑世宗久不上朝，营建又要花费巨额资财，所以不同意重修宫殿，而另一位阁臣徐阶竭力主张重建。在这件事上，当时很多人都赞成严嵩的意见。《明史纪事本末·严嵩用事》在分析世宗宠信严嵩的原因时说：“况嵩又真能事帝者；帝以刚，嵩以柔；帝以骄，嵩以谨；帝以英察，嵩以朴诚；帝以独断，嵩以孤立……猜忌之主，喜用柔媚之臣。”可见，因为严嵩能真诚事主，并无二心，才能够赢得皇帝的信任。
在严嵩的家乡，不论是知识分子还是普通农民，人们至今还认为对严嵩至多只能称为“权相”，而基本上不说是“好臣”。在谈到他的“过错”时，也多认为主要是他的儿子严世蕃得罪了他人，才招致祸端。另外，据说严嵩本人在日常生活中不但不奢侈腐化，还非常“俭朴”哩。同时，他还好做善事，从嘉靖二十三年到三十五年的十多年时间内，他先后在宜春、分宜两县捐钱修建了四座石拱桥，共花三四万两银子，此外还曾经出资修葺了分宜县学等等。
虽然在政治上对严嵩的争议很多，但其文学才能却是人所公认的。据说他幼时十分聪慧，从小就文辞出众，八岁时书史成诵，出句成章。根据《严氏族谱》的记载，严嵩读私塾时，经常和他的老师及叔父对联语，其中有“手抱屋柱团团转，脚踏云梯步步高”、“七岁儿童未老先称阁老，三旬叔父无才却作秀才”等等，由于出语非凡，被人称为神童，所以他在二十四岁的时候就考取了进士。很多人站在比较客观的立场上指出，对于严嵩不能因人而废文。明朝古文运动领袖李梦阳便评论他的诗词“达达者其词，和淡者其词”，称他为“淡石潭翁”。他的《钤山堂集》存目于清代纪晓岚主编的《四库全书》之中，《四库全书总目提要》评价《钤山堂集》时，认为“孔雀虽然毒，不能掩文章”。明朝文豪王世贞生父被严嵩所害，可以说与他有不共戴天之仇，但也本着“代不能废人，人不能废篇，篇不能废句”的精神，十分肯定严嵩的诗词。