Ну и собственно говоря напоминаю что в каноне самих иных мы видели пару раз. Толпы мертвецов да, как бы наступают, но так неспешно что в общем то наступают с первой книги и все никак не наступят. То есть либо они ждут, скажем пока их волшебная сила выйдет на свой пик, либо банально неспособны преодолеть Стену потому что она очень волшебная и им нужен "ключ". Или хотя бы замёрзшие моря вокруг, чтобы обойти пешком – и они ждут собственно больших больших холодов