И - да, он вносит искажения за счёт плохо сглаженных пульсаций выпрямленного сигнала, а также тормозит при попытках сгладить его хорошо выбором больших ТАУ. Это - специфика его работы: он должен подчиняться грязному или запоздавшему управляющему сигналу.
Вообще-то, это не так. Можно сделать - и так делают - компрессоры /лимитеры с очень быстрым временем срабатывания (Attack time - AT), начиная примерно от 10 мкс (микросекунд! т.е. безо всякого запаздывания) и с искажениями, определяемыми практически только нелинейностью VCA (тысячные - сотые доли %). AT не определяет искажения, это время отпускания (Release time - RT) влияет на искажения. Т.к. чем короче RT, тем хуже отфильтрован управляющий сигнал. Но и здесь нет жесткой взаимосвязи. Прибегают к различным ухищрениям, чтобы и RT было небольшим (от нескольких десятков мс), и искажения невелики. Это применение цепей Hold Time - выдержка перед релизом, это адаптивные детекторы и др. Для сабжевого же применения короткий RT даже вреден, поэтому проблема искажений из-за плохой фильтрации [сигнала детектора] стоит не так остро, как кажется на первый взгляд.
Тем не менее, VCA-лимитеры для высоколинейных УМЗЧ - это всё равно не очень подходящая идея. Им место разве что, в концертных УМ, там их и применяют. Кстати, оптронные регуляторы искажают больше хороших VCA, как это ни покажется странным.
В общем, всё это оффтоп. Так, для общего развития.
ПС. Неплохая идея лимитера "на переключателях". Где-то рядом с вашими идеями.