Похоже, что и не было или исчезли уже давно. Потому что, когда описывается жизнь Лили и Джеймса с маленьким Гарри в Годриковой Впадине там явно родители управлялись одни: едва ли домовый эльф позволил надрываться осиротевшему младенцу пока его не заберут из-под развалин. А покольку родители Джеймса к тому времени уже умерли, то если бы эльфы у них были, то они должны были перейти в услужение сыну.