Они просто были очень, очень умными.
А потом их численность сократилась, они попали в "бутылочное горлышко", переженились между собой и отупели.

Поэтому Основатели в четыре лица сделали магический замок, а нынешние маги не всегда могут мантии себе починить.