возможно, что он отдавал их доверенным лицам в 60-70-х, как с беллатрикс и малфоем, т.е. тем, кто был жив в то время, а когда они погибли, он забрал и перепрятал. или они потеряли его доверие и он решил забрать.
он свои куски души, как поощрительные конфеты раздавал.