Ну говоря о ГПшном сеттинге – где то же должны были учить магии до Хогвартса всяких сирот и маглорождённых при скорее всего отсутствии какого то особого волшебного сообщества. Ну кого то наверное подбирали другие волшебники, но кого то могли и в монастыри сплавлять – просто потому что а чё с ними делать.