这一次探病之后不久，李夫人便夭逝了。她死在霍去病之前，享年也应该比霍去病更短，可能只有二十岁左右。如果是现在，这不过是大学未毕业的年龄，但是她留史书上这短短的几句话，其中折射出的智慧坚忍及胆识，却足以让她成为历史上最难以令人忘怀的女子之列。
十四、破格的思念
李夫人的冰雪聪明和清醒理智，在她去世后得到了事实的验证。刘彻满脑子都是她不可方物的迷人形象、以及自己将她“气”得病中啼哭的过错，李夫人不肯见面的事他已经完全不放在心上了。于是他伤感万分，为了表示自己的情意，他下令为李夫人举行皇后级别的葬礼，为她在自己的茂陵北选择葬地。《三辅黄图》记载这墓地的规格道：“东西五十步，南北六十步，高八丈。”
这还不算完，刘彻仍然觉得没有表达够自己对李夫人的思念之情，又让画师画了她的像，挂在甘泉宫里时常追忆。
画像看得多了，刘彻越发思念不已。这时有一个齐国来的方士少翁自告奋勇，说自己能为武帝召李夫人的魂魄前来相见。
于是在这天晚上，少翁摆下灯烛，在李夫人生前起居的地方设起帷帐，在帐前陈列酒肉祭品，又另设一帐让武帝安坐其中，并要求他无论看到什么都要保持风度，维持现场肃静的状况。然后他便舞弄起来。
果然，片刻之后，武帝便仿佛远远地看见帷帐中出现了一个姣好的身影，恍惚便是李夫人的模样。武帝眼看这身影在帷帐中时而安坐时而款款步行，自己却只能远远地旁观，终于按捺不住站起身来，可是刚刚站起，那帷帐中的身影便悄然消失，只剩下一片静寂漆黑。
武帝被这场面打动，伤感不已，作诗道：“是邪，非邪？立而望之，偏何姗姗其来迟！”后来他又做了另一首悼念词《落叶哀蝉曲》：“罗袂兮无声，重墀兮生尘，虚房冷而寂寞，落叶依于宁扃，望彼美之女兮，安得感余心之未宁。”武帝命令宫廷乐师将两首词都配上音乐，让宫女们在后宫中传唱。
有这么一天，武帝在延凉室内休息。在梦中他看见李夫人出现，还将手中的一把蘅芜香送给自己。当他猛然惊醒，吃惊地发现虽然只是一场春梦，那阵阵异香仍然留在衣枕之间，好几个月都没有消失。为了纪念，武帝便改延凉室为“遗芳梦室”。
在宫女们吟唱的情歌声和如此的奇境反复刺激之后，刘彻对李夫人更是相思欲狂，不久写下了一篇更为动人的赋：
“美连娟以修嫮兮，命樔绝而不长。饰新宫以延贮兮，泯不归乎故乡。惨郁郁其芜秽兮，隐处幽而怀伤。释舆马于山椒兮，奄修夜之不阳。托沉阴以圹久兮，惜蕃华之未央。念穷极之不还兮，惟幼眇之相羊。秋气惨惨以凄泪兮，桂枝落而销亡，神茕茕以遥思兮，精浮游而出畺。托沈阴以圹久兮，惜蕃华之未央，念穷极之不还兮，惟幼眇之相羊。函菱荴以俟风兮，芳杂袭以弥章，的容与以猗靡兮，缥飘姚虖愈庄。燕淫衍而抚楹兮，连流视而娥扬，既激感而心逐兮，包红颜而弗明。欢接狎以离别兮，宵寤梦之芒芒，忽迁化而不反兮，魄放逸以飞扬。何灵魂之纷纷兮，哀裴回以踌躇，势路日以远兮，遂荒忽而辞去。超兮西征，屑兮不见。浸淫敞恍，寂兮无音，思若流波，怛兮在心。
乱曰：“佳侠函光，陨硃荣兮，嫉妒翕茸，将安程兮！方时隆盛，年夭伤兮，弟子增欷，洿沬怅兮。悲愁于邑，喧不可止兮。向不虚应，亦云已兮，嫶妍太息，叹稚子兮，懰栗不言，倚所恃兮。仁者不誓，岂约亲兮？既往不来，申以信兮。去彼昭昭，就冥冥兮，既下新宫，不复故庭兮。呜呼哀哉，想魂灵兮！”
不过，司马迁却在他所著的《史记》中，说少翁为汉武帝所召的“佳人”并非李夫人，而是齐王的生母、同样早逝的王夫人。
《拾遗记》则说，汉武帝确实也召过李夫人之魂相见，但是他找的方士名叫董仲君。董仲君花了十年功夫，才在海外找到能够让魂魄依附的奇石，刻成李夫人的模样放在轻纱帷幕之中，果然恍若李夫人再世。武帝非常高兴，想要走近“李夫人”身边，董仲君却说那石头上有奇毒，何况魂魄并非活人，因此只能远看不能靠近。为了不让武帝误碰，董仲君很快便将这石像裂为九段。武帝大失所望又相思难耐，随后便修筑了梦灵台，用来祭祀李夫人。
而民间更有这样的说法，说武帝上了方士的大当，他隔着纱帐所看到的“魂魄”，与李夫人、王夫人都没有关系，其实只不过是少翁等人的一场皮影戏表演而已。
但是不管怎么说吧，汉武帝刘彻对李夫人一往情深（当然也许只是李夫人死在了他最爱她的关键时刻），他对李夫人辗转多年都不曾淡忘，就连他晚年重用的名臣霍光都对此留下了深刻的印象。当武帝去世之后，由于他生前绝大多数有名号的后妃都先后被他以罪谪死，而他身为皇帝，总不能光杆一个葬入帝陵吧！作为托孤重臣的霍光金日磾苦思冥想之后，终于灵光一闪，追封李夫人为“孝武皇后”，将她的灵位与武帝并列享受后人的祭祀。
由于在死后当了皇后，李夫人墓被称为“英陵”，又名“习仙台”。
然而从李家姐妹责备她为何不见皇帝的场面可以推想，李夫人的兄弟姐妹们不但没有她十分之一的冰雪聪明，更热衷于功名利禄，很容易就冲晕头脑，对帝王的喜怒无常以及感情世界没有足够的认识。
在李夫人早逝之后，相思情切的刘彻晋封李夫人的哥哥李广利为贰师将军、李延年为协律都尉。
十五、又一起皇后家族的巫蛊之祸
武帝是雄才大略的帝王，由于他的富于进取和野心，中国得以拓土开疆。但是他有令人望而生畏的特征：多疑。如果他觉得自己的王权受到了威胁的时候，他更能六亲不认并且杀人如麻。
在霍去病崭露头角之后，早已对卫青军权过大产生疑虑的刘彻毫不犹豫地开始重用霍去病、借此遏制卫青的气势。而卫青对此毫无怨言，也许是少年时吃过太多的苦，他的性情和善，谦恭退让，对武帝所做的任何决定都毕恭毕敬地接受。霍去病虽然年轻，性格豪迈有气魄，敢作敢为，从不泄露别人说的话。刘彻对他非常喜爱，甚至达到了纵容的程度。
然而，霍去病很早就去世了，这严重打击了武帝，也搅乱了他的计划。虽然卫青有军事天才更有出兵必胜的运气，武帝仍然不愿再起用他，以至于在霍去病死后很长一段时间里，汉朝都没有再次对匈奴用兵。
霍去病死后的元鼎元年，卫青的儿子宜春侯因犯法被夺去封爵。元鼎五年九月，疑心病越来越重的汉武帝以“列侯献黄金酎祭宗庙不如法”（其实只是助祭金的份量或成色不够）为由，一口气废去一百多名列侯的封爵，其中又包括卫青的另两个儿子阴安侯和发干侯。虽然对卫青已经不如以往，但是毕竟人还在，而刘彻仍然对霍去病念念不忘，甚至还抚养他的儿子霍嬗准备日后为将。卫子夫的皇后位置还是很稳。没想到两年后霍嬗夭折，又过了四年连卫青都去世了，虽然卫伉继承了长平侯的爵位，但是那已经不可同日而语。不过卫子夫的姐夫公孙贺此时已经当上了丞相，卫子夫母子的地位仍然算得上稳固。
然而祸不单行，征和元年的秋天，巫蛊之祸凭空而起。起因在于刘彻年老体弱，大白天看见刺客出现的幻象，又做了个被数千木人围攻的恶梦。不久之后，卫子夫不争气的外甥公孙敬声又犯了贪污罪。公孙贺为了保住儿子的性命，便请求以逮捕巨盗朱安世立功赎罪。朱安世被擒获之后，为了报复便向上告公孙敬声与表姐阳石公主私通，还说阳石与诸邑公主在后宫中行巫蛊之术。这份控告信正和刘彻的幻觉怪梦丝丝合缝，刘彻遂兴起大狱，派司隶校尉江充追查。
江充与郅都、张汤一样，都是著名的酷吏。然而至都虽名列酷吏，却执法刚正不畏权贵而且为国保土有大功，号为“苍鹰”；张汤则清廉自守，被朱买臣等人诬陷自杀后家产仅五百金，殓葬时有棺无椁（武帝得知后诛杀了朱买臣等人。张汤家风严谨，其子张贺即为汉宣帝的媒人，撮合了宣帝与许平君的婚事。张贺死在宣帝即位之前，宣帝为报答他，追封其为恩德侯，其七岁孙为关内侯，其兄张安世亦封侯且前后加食邑达万户。张安世遂辞去官职并且勤俭度日，宣帝对他的亲近远超过辅政大臣霍光。此后张家继续沿袭张汤的清廉谨慎作风，王莽篡汉时也不曾失去显赫的地位，东汉光武帝刘秀时仍然晋封张汤后人为武始侯。张汤家族成为有汉一朝的独一无二的人物）——然而江充是酷吏中的败类，他由于与太子刘据结怨，而开始处心积虑要颠覆刘据的地位。武帝将巨盗朱安世的案子交到江充手里，真是正中他的下怀。而在颠覆卫子夫刘据母子地位这件事上，江充更与贰师将军李广利是同道中人。
在卫青去世后第三年（太初元年，即公元前104），汉武帝听说西域大宛王国（今中亚费尔干纳盆地，乌兹别克斯坦、塔吉克斯坦和吉尔吉斯斯坦分别拥有一部份）贰师城外有一种“汗血宝马”，便派使者带着巨额黄金前往购买。然而大宛国王拒绝出售，使者破口大骂。