А не надо их носить. И не вселялись они в его новое тело. Это якоря, они дух держат - и, как показала практика Волди, вполне успешно. И вселяется в новосозданное тело именно дух, хоркрусы-якоря тут не причем.
Их работа - лежать тихонько и не отсвечивать, это не резервная копия (хотя насчет дневника я не уверен, ну так первый блин).