У него был допуск в Запретную секцию, а потом ещё по свету покатался, редкие знания по магии поразрабатывал. Волдеморт, при всём его не оч хорошем эмоциональном интеллекте, очень хорошо умел манипулировать людьми, чтобы получать нужные знания... и, наконец, он был ну прост гением в магии. Бывает и такое. Дамблдор вон тоже без отца рос и кучу времени тратил на заботу о сестре, с чего бы он стал гением в магии? Гриндельвальда из Дурмстранга выпнули за тёмность, тоже якобы недоучка - но...