不过人一老就容易犯糊涂，一糊涂就容易铸成大错，武帝年老后开始大搞迷信活动，整出个巫蛊之祸，结果连自己的亲生儿子，太子刘据都被杀了，武帝回过神来又开始后悔，但人死不能复生，七十一岁高龄的武帝在临死前立了一个七岁的儿子刘弗陵做太子，就是后来的汉昭帝。
昭帝是个短命的皇帝，二十多岁就死了，死的时候他的上官皇后才十多岁，上官皇后的父亲，跟当时的首席辅政大臣霍光一样是武帝临终前安排的顾命大臣，不过他似乎跟霍光很不对付，几次三番的想要搞倒霍光，不幸的是霍光没搞倒，自己反被搞倒，所以这一门外戚也没什么作为。
请大家注意，真正外戚掌权的时代，自昭帝死掉后，即将慢慢拉起帷幕。这里的关键人物就是霍光。
说起霍光，就要说几个熟悉的人。霍光的父亲霍仲孺早些年有一段风流债，就是与卫青的姐姐卫少儿私通生下霍去病，后来霍仲孺回家又娶了媳妇生了霍光。因此，霍去病与霍光是同父异母的兄弟，都是卫青的外甥。虽然霍父和卫少儿没有事实上的婚姻，但后来霍去病知道自己生父是霍仲孺后，主动认了祖归了宗并对其父好生赡养，以尽自己的孝心。这样刘、卫、霍三家的亲戚关系就此形成。卫青是汉武帝的小舅子，去病与霍光是卫青的外甥，也就是这种裙带关系，再次为汉朝继吕氏专权以后外戚再次专权埋下伏笔。汉武帝刘彻因宠爱卫子夫（卫青的另一个姐姐）而重用其弟卫青。当年卫青的大外甥霍去病年十八，长相俊美又善骑射，在对匈奴的战争中屡立战功，因而深得汉武帝的喜爱，对其又是加官又是赏赐，重点培养。汉武帝这样做的原因，一是自己十分宠爱卫子夫，遵循爱屋及乌的道理，凡是卫家的人他都重用；二是打算自己死后可以把自家的江山托付给自己信赖的人进行管理，可惜的是还未等汉武帝对其加封大将军一职时，短命的霍去病就一命呜呼了，汉武帝为此伤心了很长时间。好在卫家还有一个外甥，于是武帝在临终时把大将军这个最高称号授给了霍光。要知道霍光没有上过战场，半点功劳也没有，为什么还要给予霍光这么大的称号呢？其实还是出于汉武帝对霍去病的怀念，对卫青的信任，对卫子夫的爱。另外武帝有个毛病全凭喜好用事，对自己喜爱的人就加官进爵，不喜欢的人只有让他靠边站。由此可见武帝对卫家，霍家可是不一般的好啊。