Как я уже писала, диадема была последним крестражей перед Гарри и Том для создания крестража принес в жертву некоего местного. Можно предположить, этот самый местный перед смертью проклял его, хотя бы в духе "да чтоб ты здесь и сгинул", что в сочетании с ритуалом и вызвало такой эффект.
Или Том мог припрятать в Албании то же кольцо, к которому его и притянуло. А в хижине он его перепрятал уже после того, как вернулся в четвертой части, чтобы опять не унесло. Времени у него было много (идея не моя, из какого-то фанфике)