В каноне Дурсли жили в этой реальности. Например, они не могли оставить десятилетнего Гарри одного дома, когда ехали в зоопарк. Не нашли няню, приходится брать с собой, иначе соседи могут позвонить куда следует.
Насколько я помню, в каноне они не оставили тогда Гарри одного, потому что боялись, что от дома останутся одни руины