Мантия, как я это вижу и понимаю, это традиционная одежда волшебников, без которой на людях не покажешься потому что традиция, но вне этого они могут носить и носят примерно то же самое что маглы. Драко опять же при первой встрече вообще не удивлён дадлиному наряду на Гарри и не идентифицирует того как грязнокровку или полукровку. Одинадцатилетний Драко конечно не Шерлок Холмс, но полагаю если бы он штанов в жизни не видел, или скажем их не было принято надевать иначе чем играя в квиддич — его бы это озадачило