У меня похожее было с сериалами. Читать не могу в оригинале, а вот слушать да.
Вообще мне кажется, это возникает из-за того, что запоминается впечатление. И поэтому не важно, на каком языке была инфа воспринята.