Вы, как и многие другие комментаторы, забываете, что Грейнджеры живут не в России, а в Англии. Где уж так исторически сложилось, дети (разумеется речь идет об обеспеченных людях) большую часть жизни с 11 (а местами и с 4-х) лет проводят в интернатах. А на каникулах часть времени традиционно посвящают друзьям, т.е. ездят в гости к товарищам (обычно принимающая сторона обладает более высоким статусом, что верно с точки зрения волшебников для Уизли и Блэка по отношению к Грейнджерам).
Т.е. видеть своего ребенка дай бог пару недель в год - вполне нормально. Как это частенько описывается в англоязычном фандоме, где люди привынее к этим реалиям - на время отпуска родителей Гермиона с ними, а дальше - к друзьям, а не сидит одна дома.
Хотя лично мое мнение, что нелогичным был как раз факт стирания памяти в каноне. Это настолько не соответствует Гермионе, которая яростно борется за права всех кого можно, что невольно подозреваешь что-то нехорошее, что сделали с ее мозгами.