с чего вы взяли, что речь о его настоящей семье и настоящей бабушке?

скорее всего Том действительно "вышел из лесу" под чужой личиной и чтобы сразу не разоблачили, жил отдельно от "семьи"