Они продвигались на юг до 31 декабря. Вильсон совсем на время потерял зрение из-за снеговой слепоты, так что два дня Шеклтон шел впереди со своими санями. Последний лагерь был расположен примерно в 13 км от Западных гор, против широкой долины, ведущей к западу, которую капитан Скотт назвал проходом Шеклтона. Позади нее поднимались две высокие вершины, получившие название гор Лонгстэфф и Маркхэм, из них первая была выше 3000 м, а вторая более 4500 м. Это было на параллели 82°15′ ю. ш. Была сделана попытка достичь огромных красных утесов, видневшихся на западе, но, спустившись с немалыми трудностями на дно снежной ложбины, они встретили впереди вертикальный ледяной обрыв с нависающей вершиной, более 25 м высотой, совершенно преградивший им путь.
Приходилось торопиться с обратным путешествием: пищевых запасов в санях оставалось лишь на две недели, а расстояние до первого склада было таково, что в день надо было проходить по 11 км, чтобы добраться до него вовремя. Сделать это удалось. Собаки по дороге околевали, или их убивали, чтобы кормить ими живых. Путешественники напрягали все свои силы. Шеклтон на два дня лишился зрения из-за снеговой слепоты, а когда они 14 января 1903 года добрались до склада продуктов, у всех троих обнаружились также и сильные признаки цинги.
В тот же день у Шеклтона началось кровотечение при кашле, и товарищи не позволили ему далее тащить сани и исполнять тяжелую работу. Он продолжал все же идти, делая по 15–16 км в день, но в своем дневнике отмечает лишь, что «чувствовал себя не совсем хорошо», и жалуется на то, что другие принуждены делать его работу и он не в состоянии им помогать. Они относились к нему с преданностью и сочувствием истинных друзей. Через две недели удалось добраться до второго склада продуктов, и пищи тогда было уже достаточно. Вскоре появились на горизонте и знакомые холмы окрестностей зимовки. Шеклтону становилось с каждым днем все хуже и хуже, но он старался побороть болезнь и не сдавался. Это кошмарное путешествие кончилось 3 февраля, когда их встретили на льду Скилтон и Берначчи и помогли им добраться до судна.
Вспомогательное судно «Морнинг» пришло из Англии и привезло из дому письма.