Палочка это как мышка в управлении компом. Можно и без мышки, но не все получится.
Может волшебники видят мир иначе, как например в очках виртуальной реальности. Когда перед тобой панель управления и пасы руками это всего лишь работа на невидимой маглам клавиатуре. И ведь надо еще и заклятие знать и произнести правильно (пароль), поэтому колдовать надо учиться.