Годовалый, нежеланный ребенок вообще не хилый стресс.
Начиная с того, что у него нет и не может быть банальных магловских документов, вакцин и прививок, хз какой у него иммунитет и как лечить его от той же простуды. Даже к врачу не сводишь.
он не может как-то минимально контролировать свою магию. А ему год, тут и ночные подъемы, и истерики "где мама?", и просто прорва времени на удовлетворение базовых нужд. Тут с родным (любимым) ребенком женщины не всегда справляются, а это подкидыш от дуры-сестры (по мнению петуньи), который кроме раздражения может ничего не вызвать. Ни объяснений, ни денег, ни ясности Дамблдора им не дал, только лишнюю головную боль и опасность
Наверняка расходы на него еще и ударили по их кошельку. Какая уж тут любовь.