正史与野史都是记录历史的文字资料，汉武帝在正史上留下了很多笔墨，在野史上也留下了许多笔墨。历代文人墨客都很喜欢讨论汉武帝这位千古一帝的正史和野史。汉武帝野史中也存在很多故事。
汉武帝野史中记载，汉武帝的第一任皇后陈阿娇是他姑母馆陶公主的女儿。汉武帝在四岁的时候，他的姑母问他可愿娶阿娇为妻，汉武帝说，若娶得阿娇为妻，就为阿娇造一个黄金屋子，用来给阿娇住。金屋藏娇就是这么来的。正史上没有记载这个事情，但是在野史上有很多关于这件事情的传闻。
汉武帝的第二任皇后是卫子夫，在野史上，汉武帝是在如厕的时候看上卫子夫的。据野史传闻，卫子夫的头发非常漂亮，容貌虽然不是非常美丽，但却有我见犹怜的气质。
汉武帝最宠爱的第三个女人是李夫人，她非常美丽，后来却因病去世了。在野史上记载，汉武帝一直思念李夫人，后来有个道士来告诉汉武帝可以用一种石头来招到李夫人的魂魄。汉武帝派人找到了那种石头，于一个晚上在帐幕后面看到了李夫人的影子。这只是个野史传闻，真假很难辨别。
据汉武帝野史传闻，汉武帝还很喜欢男色。韩嫣是汉武帝的陪读，容貌柔美，很像妇人样子，据传汉武帝经常同韩嫣同塌而眠。据传闻汉武帝还宠爱宫廷乐师李延年。李延年是净身后进宫侍奉汉武帝的。
汉武帝韩嫣
韩嫣，是汉武帝的宠臣。在汉武帝还是胶东王时，韩嫣就与汉武帝刘彻相识，两人曾一起读书学习，感情颇为深厚。当刘彻成为太子后，他越发宠信韩嫣。等到刘彻登上帝位成为汉武帝之后，韩嫣比之前更为受宠，收到的赏赐无数，两人感情更为深厚，甚至同睡同起。
韩嫣出身的家世非常好，他的曾祖父是韩王信，他还是弓高侯韩颓当的庶孙。也正是因为他优秀的家世背景，韩嫣才能与刘彻相识。在刘彻做胶东王时期，韩嫣曾与刘彻一起学习，两人之间的深厚感情使得即使刘彻成为太子以及成为皇帝后，也依旧亲近韩嫣，甚至更为宠信韩嫣。韩嫣非常擅长骑术与射箭，同时还非常擅长讨好别人。在汉武帝即位后，想要征讨匈奴的时候，韩嫣就最先开始学习匈奴兵器的使用以此来讨好汉武帝。而因为这个原因，韩嫣更加受汉武帝宠信，地位越来越高，收到赏赐无数，甚至还能与汉武帝同睡同起，可见其受皇帝宠信的程度之深。
韩嫣虽然非常受汉武帝刘彻的宠信和亲近，但是当时的王太后却非常讨厌他，韩嫣最终也是死于王太后之手。根据《史记》中的记载，韩嫣因为颇受汉武帝宠信得以侍奉汉武帝，经常出入宫女们居住的永乐巷。后来他与永乐巷的宫女发生了私情而被王太后所知，王太后听闻后非常生气，大怒之下派遣使者赐死韩嫣，即使汉武帝为韩嫣向太后求情请罪也无济于事，韩嫣最终因此而死。