Вы забыли важный факт. У Малфоя дома был зиндан. Не в министерстве или ещё где на нейтральной территории. Это по моему, лучше всего говорит о его специальности у лорда.