К рассуждению о численности. Социальные процессы при столь низком количестве людей, очень быстро приведут к полной деградации и прекращению существования общества. Не говоря уже о вырождении в связи с близкородственными браками. И тогда либо механизмы регуляции должны быть совершенно иными, или численность должна быть все же существенно больше.
Итого: ваши рассуждения, опираются на книги Роулинг, а не на здравый смысл. И именно поэтому попытки других авторов модифицировать эту вселенную пусть ведут к отклонению от канона, но зато больше согласуются с пониманием социальных процессов, пусть и в примитивном виде.