Да не вписывается. Если бы случился хоть один подобный случай, то либо Дурсли от Поттера избавились бы, либо вели себя себя как шелковые.
А так - махровое АУ.
Впрочем,в последнее время в фанфиках наблюдается очень вольное трактование Missing scene.