霍去病从童年时代就是生活在富贵之家，当时他的家族在当时的长安也是属于大家族的，所以霍去病天生是个大少性格（很酷很冷很倔），于是在当时他出兵打仗时，天子派遣太官赠送他几十车食物，待他回来时，辎重车上丢弃了许多剩余的米和肉，而他的士卒还有忍饥挨饿的。他在塞外打仗时，士卒缺粮，有的人饿得站不起来，而骠骑将军还在画定球场，踢球游戏。这是一种天生的毛病，是家族给他的烙印，考虑到霍去病的身份、年龄和心理成熟度（军事才能上的成熟不等同于其他方面的同步成熟），不要强求一个天生富贵的小孩成为一个圣人，让霍去病有机会多活上几十年、也许他也会向李广看齐，何况，尽管霍去病不体恤士卒，好像并不妨碍这些士卒替他卖命。其实从汉朝士兵的角度来说，也许更愿意在霍去病的麾下，因为毕竟大多数人还是渴望一战成名，功成封侯。
元狩六年（前117），年轻的将军霍去病去世了，而死于什么原因史书中没有记载，这位伟大的少年将军就如流星一样从历史的舞台上消失了，汉武帝对他的死很悲伤，调遣边境五郡的铁甲军，从长安到茂陵排列成阵，给霍去病修的坟墓外形象祁连山山的样子。给他命名谥号，把勇武与扩地两个原则加以合并，称他为景桓侯。
他的舅舅卫青在10年后去世，卫青和霍去病的墓都在汉武帝的茂陵旁边，霍去病的墓很像祁连山，而卫青的墓很像匈奴境内的卢山。两山之中，是牢固的汉室江山。霍去病好像就是为了打败匈奴来到这个世界上，在他短暂一生中，从18岁第一次出塞，19岁歇了一年，20岁三出河西，春天的时候在河西走廊纵横了近4000里，带着一万人冲杀于匈奴各部，回来的路上更是在今兰州城西北郊的皋兰山跟匈奴两个部落王鏖战一场，一万人最后只剩下3000人，可以想见其战斗的激烈。稍事修整过后，又在夏天再次出塞，这一次在军事史上堪称经典的大迂回作战，让霍去病在沙漠戈壁中一路砍杀驱驰了近7000里路。在带着他的胜利之师浩浩荡荡地回到长安后不久，被他杀败的两个匈奴王就要求降汉，霍去病再次出河西迎降然后，21岁又休息了一年，22岁时做了一生中最后一次也是功勋最卓著的一次出征，带着5万骑兵，北向追杀匈奴左贤王部数千里直至今贝加尔湖。