话说西汉的权臣霍光在汉昭帝面前的角色就类似于郭子仪，集朝中生杀大权于一身的他，如果有异心想谋皇位，只是几分钟就可以搞定的事。但霍光不负汉武帝的抚孤之恩，宁可选择“愚忠”，也不做“出格”的事。然而，霍光不做，并不代表他的子孙就不做。
汉宣帝掌握霍氏罪行后，镇定自若，把尚书这个职务交给霍云来当，名义上是给了霍家无上的权力，但霍云和整个霍氏家族来不及高兴，汉宣帝接下来的一道诏书就给了他们当头一棒。霍云的尚书位子屁股还没有坐稳，汉宣帝就宣布，大家上疏奏事，可以不通过尚书，直奏给皇帝，并美其名曰：为官民减压。
这样做实际上已把霍云的尚书权力架空。汉宣帝把朝中的“民事权”抓在自己手中后，接下来开始夺霍家的兵权。他采用明升实降的方法，先是把博陵侯霍禹尊为大司马，给了他和他父亲霍光一样的官衔，与此同时，取消了他右将军的军印，封亲信张世安为卫将军，统管北方八校尉，负责京师及军事调动工作。随后汉宣帝用这种方法，又陆续将霍氏家族在朝中掌握军政大权的成员调离了京城。不久，汉朝政府的军政大权，都被与霍家有仇的官员以及汉宣帝的祖母史良娣家族及许皇后的许氏家族所控制。
盛极必衰，失去实权的霍氏家族很快就体会到了什么叫“落地的凤凰不如鸡”。此时，弹劾霍氏家族的奏章如同雪花般飞向汉宣帝，汉宣帝紧握着这些奏章，终于露出了久违了的笑容，有了这些“罪证”，摧毁霍氏家族只是时间问题了。
