На днях на Поттермор опубликовали статью, в которой сказано, что родителями Джеймса были Флеамонт и Юфимия Поттеры. Так что Ваша теория верна.