Моя фантазия пустая!?
Дирсли могли воспитать из Гарри забитое чмо, уверенное что "кто сильнее тот и прав", а не канонного Поттера. Вывод: канонный Гарри Поттер - пришелец (попаданец/вселенец...).