IMHO, человеческая память - штука далеко не абсолютная, а уж если жить приходится заново, да еще с полуторагодовалого возраста, там вообще в кашу все перемешается - и о прошлой жизни останутся только "маяки" значительных событий, плюс временами всплывающие обрывки воспоминаний.
Да и сам принцип работы артефакта (Четвертого дара) позволяет делать некоторые допущения.