В начале второй книги есть момент где говорится что Гермиона учится лучше Малфоя, вот он и бесится, что какая-то там лучше него.