頃之，家居數歲。廣家與故潁陰侯孫屏野居藍田南山中射獵。嘗夜從一騎出，從人田間飲。還至霸陵亭，霸陵尉醉，呵止廣。廣騎曰：「故李將軍。」尉曰：「今將軍尚不得夜行，何乃故也！」止廣宿亭下。居無何，匈奴入殺遼西太守，敗韓將軍，後韓將軍徙右北平。於是天子乃召拜廣為右北平太守。廣即請霸陵尉與俱，至軍而斬之。