Влияет, и чем выше чувствительность акустики - тем это явление заметнее (и конечно же фазоинвертор тоже оказывает свое влияние). Правда если источник с заведомо кривой фазой - отличий может и не быть.
Выражается это на слух слегка "разманной" атакой инструментов, появлениями "фазовых" искажений. Но если стоит задача получить "бух-бух" вместо "бум-бум" и своеобразную "кашу" на средних частотах (равносильно "зализыванию" локализации и объема) - тогда можно выразиться "не влияет".