Собственно, мне недавно пришло в голову сравнение, что маги не управляют магглами примерно по той же самой причине, что Волдеморт не стал занимать пост министра магии. А зачем? Они/он и так может творить всё что захочет, но при этом никакой ответственности и обязательств на них/нём нет.
Основное различие, что в магмире про Волдеморта знают все, и многие подозревали, что смена курса политики - его рук дело. Для магглов ничего аналогичного нет. Даже если серьёзный политический деятель начнёт крякать на заседании - они и не представят, что это последствия применённой магии.