Гарри так суров, что называет молодым человеком кого угодно без седой бороды.
А может Квиррелл выглядит моложе его отца, и потому автоматом считается "молодым"