臣司马光曰：“霍光辅佐汉朝，可以说是忠心耿耿，然而却终究未能庇护他的宗族，是什么原因呢？威严权柄，只有君王才能享有，如果由臣下享有，长期不归还君王，则很少能逃脱灭亡的命运。以汉昭帝的贤明，十四岁就能洞察上官桀的奸诈行为，原来可以亲理朝政了，更何况汉宣帝十九岁即皇位，聪明刚毅，了解民间疾苦，而霍光却依然长期专擅大权，不知引退，反在朝中广植私党，致使君王积蓄怨愤于上，官、民积蓄不满于下，咬牙切齿，侧目而视，都在等待时机发动。霍光自己能够免祸，已然是侥幸了，何况子孙更加骄横奢侈呢！尽管如此，假如当初汉宣帝专用官阶和俸禄赏赐霍光的子孙，使他们富有，让他们享用大县的收入，定期前来朝见皇帝，也就足以报答霍光的盛德了；而汉宣帝仍然让他们主持朝政，授以兵权，等到事态严重，这才对他们加以裁夺，以至他们恐惧怨恨，生出反叛朝廷的阴谋。

这难道只是霍氏一家自己招致的灾祸吗？这也是汉宣帝酝酿而成的。春秋时，斗椒在楚国作乱，楚庄王灭其宗族，却赦免了担任箴尹的斗克黄，认为如果不让当初于国有功的斗於菟留下后代，就不利于勉励人们行善立功。以霍显、霍禹、霍云、霍山犯下的罪行，当然应诛灭全族，但立下大功的忠臣霍光却不可无人祭祀，汉宣帝竟将其全族老小全部处死，一个不留，也未免刻薄寡恩了！