Стату секретности полетел бы по швам. Потому что Гарри не один такой уникальный, с магглами живущий.
Какой-нибудь школьник, задолго до времен Гарри, накуролесил бы так, что пачка обливиаторов не справилась бы последствиями. И такая угроза была бы ежедневной от тысячи учеников.
Напомню, что с магглами жил еще и Том Риддл.