Все правильно, конспиролог может спать дальше
Изначально их было шестеро - Серый Ветер, Леди, Нимерия, Лето, Лохматик и сам Призрак. А теперь осталось в живых только четверо, т.к. Леди и Серый Ветер мертвы. И одного из этих четверых, а именно Лето он больше не чует, из-за магии Стены.
Джон тоже перестал чувствовать Призрака, когда оказался с ним по разную сторону Стены.
Но Призрак тем не менее знает, что Лето остался с другой стороны Стены, т.к. некоторое время они были по одну сторону от нее (когда Бран с волком уже перешли через Стену, а Призрак еще гулял за Стеной)