Вообще я где-то читала, что нелюбовь к жёлтому цвету и некоторым его оттенкам в основном возникает из-за невозможности воспринять этот цвет как именно чистый жёлтый.
Хотя такая фигня не только с жёлтым. К примеру, из личного—моя мама считает один из моих старых лыжников зелёным/бирюзовым. Хотя я ясно вижу что он голубой и зеленоватого оттенка там вообще нет.