Гилвуд Фишер, Том Риддл и Лили Эванс сознательно колдовали без палочки в детстве, и если Том вырос аж в целого Тёмного Лорда, то Лили — в просто девушку-отличницу, т.е. это не какой-то мега-уникальный дар, и если только этим и заниматься, то наверное к взрослому возрасту можно это умение развить.
Но я думаю, что такая магия гораздо менее разнообразна, т.е. волшебник не может выучить очень много таких фокусов, а палочковых заклинаний — может.