Настройка эффектов предварительной обработки

В версию Android 10 включены следующие требования для захвата с помощью VOICE_COMMUNICATION .

  • Реализации должны предусматривать акустический эхоподавитель (AEC) на пути захвата при захвате с помощью VOICE_COMMUNICATION .
  • При использовании AEC его необходимо обнаруживать и контролировать с помощью AcousticEchoCanceler из API SDK.

Платформа Android предоставляет аудиоэффекты на поддерживаемых устройствах в пакете audiofx , доступном разработчикам. Например, Nexus 10 поддерживает следующие эффекты предварительной обработки:

Сопряжение с экземплярами AudioSource

Эффекты предварительной обработки связаны с режимом использования, в котором запрашивается предварительная обработка. В разработке приложений для Android вариант использования называется экземпляром AudioSource ; разработчики приложений запрашивают использование абстракции AudioSource вместо фактического аудиоустройства. Диспетчер политик аудио Android сопоставляет экземпляр AudioSource с заданной конфигурацией пути захвата (включая устройство, усиление и предварительную обработку) в соответствии с правилами, специфичными для продукта. Разработчикам доступны следующие источники:

  • android.media.MediaRecorder.AudioSource.CAMCORDER
  • android.media.MediaRecorder.AudioSource.VOICE_COMMUNICATION
  • android.media.MediaRecorder.AudioSource.VOICE_CALL
  • android.media.MediaRecorder.AudioSource.VOICE_DOWNLINK
  • android.media.MediaRecorder.AudioSource.VOICE_UPLINK
  • android.media.MediaRecorder.AudioSource.VOICE_RECOGNITION
  • android.media.MediaRecorder.AudioSource.MIC
  • android.media.MediaRecorder.AudioSource.DEFAULT

Эффекты предварительной обработки по умолчанию, применяемые для каждого экземпляра AudioSource , указаны в файле /vendor/etc/audio_effects.xml . Чтобы задать собственные эффекты по умолчанию для каждого экземпляра AudioSource , создайте файл /vendor/etc/audio_effects.xml и укажите эффекты предварительной обработки, которые необходимо включить. Пример реализации для Nexus 10 см. в device/samsung/manta/audio_effects.xml . Экземпляры AudioEffect создают и удаляют сеанс при создании и уничтожении, что позволяет эффектам (например, усилителю громкости) сохраняться на протяжении всего сеанса.

Следующий пример включает предварительную обработку для экземпляров VoIP AudioSource и Camcorder AudioSource . Объявляя конфигурацию AudioSource таким образом, фреймворк автоматически запрашивает использование этих эффектов у HAL.

<preprocess>
        <stream type="voice_communication">
            <apply effect="aec"/>
            <apply effect="ns"/>
        </stream>
        <stream type="camcorder">
            <apply effect="agc"/>
        </stream>
    </preprocess>

Настройка источника

Настройка AudioSource не предъявляет явных требований к усилению звука или обработке звука, за исключением распознавания голоса ( VOICE_RECOGNITION ). Требования к распознаванию голоса включают:

  • Ровная частотная характеристика (+/- 3 дБ) от 100 Гц до 4 кГц
  • Конфигурация для ближнего разговора: уровень звукового давления 90 дБ, показания RMS 2500 (16-битные выборки)
  • Уровень отслеживается линейно от -18 дБ до +12 дБ относительно 90 дБ SPL
  • THD < 1% (уровень звукового давления 90 дБ в диапазоне от 100 до 4000 Гц)
  • Требования к ближнему ультразвуку (для тестирования см. Тесты, близкие к ультразвуку ):
    • Поддержка SUPPORT_PROPERTY_MIC_NEAR_ULTRASOUND , как определено в разделе 7.8.3 CDD.
    • Поддержка одной или обеих частот дискретизации 44100 или 48000 без полосовых или сглаживающих фильтров.
  • Эффекты/предварительная обработка отключены по умолчанию

Примеры настройки различных эффектов для разных источников:

  • Подавитель шума
    • Настроен на подавление шума ветра для CAMCORDER
    • Настроен на стационарный шумоподавитель для VOICE_COMMUNICATION
  • Автоматическая регулировка усиления
    • Настроен на ближний разговор для VOICE_COMMUNICATION и основного телефонного микрофона
    • Настроен на дальний разговор для CAMCORDER

Ресурсы

Более подробную информацию можно найти на следующих ресурсах: