У меня сложилось впечатление, что Том а Гарри вкладывали в эту фразу разный смысл, соответственно своим характерам. Формально придраться не к чему, они действительно были только вдвоём, ведь по сути, кроме друг друга никого у них и не было. Только Том подразумевал свои цели, а для Гарри она звучала безобидно.
Том был один, а планы наполеоновские. Был нужен помощник, а Гарри подходил. Как-то так.