Вопрос исключительно механики хэдканонов. Лично мой считает, что маги Поттерверса вполне могут колдовать без палочек, но гораздо энергозатратнее и есть большие сложности с прицеливанием (указанием объекта воздействия). Палочка по факту выступает только неким фокусирующим приспособлением.