С чего Вы взяли, что описанные у Роулинг маглы не отличаются от нас?
Дурсли жили в достаточно приличном районе, ГП ходил в одежде на несколько размеров больше, чем нужно, и никто из соседей, учителей и т.д. не обращал на это внимания.
А ведь первая же проверка принесла бы Дурслям кучу неприятностей (чулан под лестницей, ага).
Так что тут либо сильномогучее колдунство, либо маглы у Роулинг не менее тупые и картонные, чем маги.