Жизнь и история магглов могла кардинально отличаться от магической. Единственное объяснение напрашивается.
С другой стороны, Хогвартс шотландского колорита не имеет - просто удаленное, скрытое, тихое место.