在完成了这样的不世功勋之后，霍去病登上了他人生的顶峰，被封为大司马。然而仅仅过了两年，元狩六年，24岁的霍去病去世了，汉武帝对霍去病的死非常忧伤，他调来铁甲军，列成阵沿长安一直排到茂陵霍去病的墓地，他还下令坟墓修成祁连山的模样，彰显了他力克匈奴的奇功。

   传说霍去病追击匈奴，过了祁连山仍不罢休，继续西进，将士们问霍去病何时班师回朝，霍去病气势昂然地说 倒看北斗星。后来两个士卒趁霍去病睡着屏住呼吸，把霍去病睡得床轻轻转了个方向，然后大喊，快看，快看啊，北斗星转了，北斗星倒转了，她俩这一喊，许多士兵都被吵醒，醒来的士兵不辨真伪地也跟着喊了起来。霍去病正在梦中，突然听到士兵纷纷乱喊，北斗星转了，慌忙做起，他睡意朦胧的一看，北斗星却是和睡前相反，就下令班师了