Насколько я поняла замысел, счастье там должно быть именно от контакта с другими людьми. Поэтому у Гарри воспоминания про первый полет на метле и приезд в Хогвартс оказались слабее фантазии о родителях