Еще раз возвращаясь к этому "мой дом - моя крепость"
У магов это, получается, доведено если не до абсолюта, то явно до более высоких вершин, чем у обычных людей. Отдельный дом, среди магглов, с которыми тоже можно не раскланиваться и не взаимодействовать социально, ведь у них нет магии. Полное уединение посреди общества, но при этом с возможностью в любой момент добраться до друзей и условного "паба", как места коммуникаций, и так далее, и так далее