Насчет Дурслей - в книгах маги довольно сильно дистанцированы от магглов, и Дамблдор мог и не предполагать про то, что Дурсли ненавидят магию. Что он знает о Петунии? Ей интересен магический мир, потому что однажды она написала ему письмо с просьбой взять ее в Хогвартс. Также, возможно, он слышал, что Лили пригласила ее на свадьбу. Два момента, которые говорят в пользу Петунии как кандидата в опекуны.