秦末時期，天下大亂，各路義軍紛起，除了章邯組建的臨時軍隊外，秦國各地的駐軍和上郡邊軍也參與了平叛戰爭，唯獨駐守嶺南的秦軍沒有回援。有人認爲，秦始皇下令這些軍隊駐守邊地，即使國內有變故也不得返回，但事實並非如此。
實際上，秦始皇並沒有下達這樣的命令。嶺南秦軍之所以沒有回援，原因主要有兩個：一是他們無法回來，二是他們不願回來。
首先，秦國的律法嚴苛，士兵不敢擅自離開嶺南駐地回援。受到秦末叛亂形勢的影響，再加上嶺南距離咸陽太遠，朝廷從未下達過回援的命令，因此嶺南秦軍也不敢擅自離開駐地回援。
其次，嶺南的人心不穩，秦軍擔心離開後嶺南局勢將再度動盪。攻佔嶺南的戰爭持續了近十年，秦軍損失慘重，嶺南人口也減少了一半。雙方的矛盾深化。在秦末天下大亂之際，攻佔嶺南僅過去了五六年，秦國對嶺南的統治並不穩固。秦軍一旦撤離嶺南，嶺南可能會再次脫離秦朝的掌控，這顯然不符合秦國的利益。
此外，無論回援的結果如何，對嶺南的最高統帥任囂來說，都沒有任何好處。他也沒有接到回援的命令，爲何要自討苦吃呢?
另外，胡亥作爲秦二世在位期間，自我沉迷於享樂，趙高則獨攬大權，大肆排除異己，朝廷腐敗不堪。任囂認爲秦朝已經失道，天下苦不堪言，不值得他再回援。在臨終前，他告訴趙佗：“番禺負山險阻，南北東西數千裏……可以立國。”因此，趙佗最終封關，絕道，築起三道防線，聚兵自衛，嶺南最終割地自立。
綜上，秦末天下大亂之時，由於任囂沒有接到回援的命令，再加上嶺南局勢不穩、對自己結局的擔憂以及胡亥的不得人心，最終導致嶺南軍隊並未選擇回援。此外，由於秦軍攻打嶺南損失慘重，因而秦軍在嶺南的駐軍其實並沒有五十萬，其實只有二十多萬罷了。
