Гарри вроде еще десять по фику. И Малфой мог просто захотеть поглядеть на этого героя. И Добби мог его и провести к дому. Я к тому, что очевидных логических ляпов нет.