Пара фрагментов из текста:

1. Фадж прекрасно знал, что Волдеморт не умер окончательно, и заявил об этом в "Трех Метлах" на третьем курсе:

"— Думаю, что это его… э-э… конечная цель, — уклончиво ответил Фадж. — Но мы надеемся поймать Блэка раньше. Вы-Знаете-Кто сейчас один, но… дайте ему преданного и способного слугу… Подумать страшно, что будет…"

То есть он вел борьбу против Дамблдора зная, что тот прав.

2. Тома не беспокоили крестражи, по крайней мере, он не проверял медальон в пещере до ограбления сейфа Лестрейнджей:

"Он метался взад и вперед среди мертвецов. Перед ним проходили видения: его бесценные сокровища, его хранители, якоря, которыми он держался за бессмертие. Дневник уничтожен, чаша украдена. Что, если… Что, если мальчишка знает об остальных? Неужели он знает, неужели он действует, неужели он уже обнаружил другие? ? Уж не кроется ли за этим Дамблдор? Дамблдор, который всегда его подозревал, который умер по его приказу, чья палочка была теперь его, все-таки дотянулся из забвения — через мальчишку…
Но если бы мальчишка уничтожил один из крестражей, он, лорд Волан-де-Морт, несомненно, узнал бы об этом! Он, величайший среди волшебников, он, самый могущественный из всех, он, убивший Дамблдора и множество других никчемных, безымянных людишек, как он мог не заметить, когда его самого, любимого и несравненного, кто-то ранил, изувечил?
Правда, когда погибал дневник, он ничего не почувствовал. Он объяснял это тем, что был тогда лишен тела — меньше чем призрак… Нет, остальные крестражи в безопасности… Их никто не касался…
И все же он должен проверить, должен убедиться… Он пинком отшвырнул с дороги труп гоблина. В его воспаленном мозгу роились образы: озеро, лачуга, Хогвартс…
Ярость его немного поутихла. Откуда мальчишке знать, что он спрятал перстень в лачуге Мраксов? Никто не подозревает о его родстве с ними, он скрыл все следы, никто не связал его с убийствами. Кольцо, безусловно, в безопасности.
А откуда знать мальчишке или кому угодно другому о том, что хранится в пещере? Кто мог бы преодолеть ее защиту? Нелепо даже думать, что медальон могли похитить!
Что касается школы… Только он один знает, где в Хогвартсе спрятан крестраж, ведь только он один сумел проникнуть в самые глубокие тайны замка…
К тому же есть еще Нагайна. Теперь она всегда должна быть при нем. Нельзя больше посылать ее с поручениями, пусть остается под его защитой…
"

То есть он не знал, что медальон подменен еще Регулусом Блэком да и вообще не слишком беспокоился о крестражах