Ну, пять лет он даже не своей личной палочкой справлялся вполне приемлемо, пусть и не всегда с первого раза. Даже в Отделе Тайн (даже с учётом того, что Пожиратели там особо не напрягались).
Да и вообще, дяде Элджи, равно как и Снейпу сильно повезло, что спровоцировать на агрессию Невилла достаточно трудно. Вон, у Волдеморта вышло - остался без змеи. У Драко в первой книге получилось. После этого блондинчик предпочел доставать Поттера и компанию - видно хорошо получил.