В одном, на мой взгляд, замечательном фанфике есть объяснение поведению Дурслей: "Знаете, Альбус... Вы ведь позволите так вас называть?.. Так вот, ваша ошибка в том, что вы ставите знак равенства между магами и маглами, – неторопливо ответила Госпожа. – Нет, я не придерживаюсь нелепой идеи чистоты крови, я просто констатирую факт: мы – два разных, хотя и близких, биологических вида. Может быть, будь Гарри младенцем, этого бы не случилось... Но в этой ситуации биологические механизмы очень неудачно столкнулись с социальными – и результат вы видите сами.
– Биологические?..
– Детёныш чужого вида, претендующий на те же ресурсы, что и её собственный – как на это отреагирует самка? В случае с новорождённым сработали бы другие инстинкты, и, как я уже говорила, положение Гарри было бы лучше...
– Значит, маглов вы считаете животными...
– Как и магов, – перебила Госпожа. – Мы с вами – просто ещё один вид обезьян, как и Дурсли – другой. Такова реальность...
– Значит, вот какова ваша точка зрения... – протянул Дамблдор. – Не могу сказать, что она мне импонирует, но, во всяком случае, заслуживает внимания. Итак, я мыслил, как волшебник...
– А волшебник инстинктивно ориентируется на сходство магии, которое очень велико у кровных родственников. То есть, будь Петуния волшебницей, она неосознанно считала бы его своим ребёнком, и вам казалось очевидным, что она поступит именно так..." (с) "Две сестры"
P.S. Прощения за простыню не прошу.