Настройка эффектов предварительной обработки

В версию Android 10 включены следующие требования для захвата с помощью VOICE_COMMUNICATION .

  • Реализации должны предусматривать акустический эхоподавитель (AEC) на пути захвата при захвате с помощью VOICE_COMMUNICATION .
  • При наличии AEC его необходимо обнаруживать и контролировать с помощью AcousticEchoCanceler API SDK.

Платформа Android предоставляет аудиоэффекты на поддерживаемых устройствах в пакете audiofx , доступ к которому открыт для разработчиков. Например, Nexus 10 поддерживает следующие эффекты предварительной обработки:

Сопряжение с экземплярами AudioSource

Эффекты предварительной обработки связаны с режимом варианта использования, в котором запрашивается предварительная обработка. В разработке приложений Android вариант использования называется экземпляром AudioSource ; и разработчики приложений запрашивают использование абстракции AudioSource вместо фактического аудиоустройства. Android Audio Policy Manager сопоставляет экземпляр AudioSource с заданной конфигурацией пути захвата (включая устройство, усиление и предварительную обработку) в соответствии с правилами, специфичными для продукта. Разработчикам доступны следующие источники:

  • android.media.MediaRecorder.AudioSource.CAMCORDER
  • android.media.MediaRecorder.AudioSource.VOICE_COMMUNICATION
  • android.media.MediaRecorder.AudioSource.VOICE_CALL
  • android.media.MediaRecorder.AudioSource.VOICE_DOWNLINK
  • android.media.MediaRecorder.AudioSource.VOICE_UPLINK
  • android.media.MediaRecorder.AudioSource.VOICE_RECOGNITION
  • android.media.MediaRecorder.AudioSource.MIC
  • android.media.MediaRecorder.AudioSource.DEFAULT

Эффекты предварительной обработки по умолчанию, применяемые для каждого экземпляра AudioSource , указаны в файле /vendor/etc/audio_effects.xml . Чтобы указать собственные эффекты по умолчанию для каждого экземпляра AudioSource , создайте файл /vendor/etc/audio_effects.xml и укажите эффекты предварительной обработки для включения. Для примера см. реализацию для Nexus 10 в device/samsung/manta/audio_effects.xml . Экземпляры AudioEffect получают и освобождают сеанс при создании и уничтожении, позволяя эффектам (таким как Loudness Enhancer) сохраняться на протяжении всего сеанса.

Следующий пример включает предварительную обработку для экземпляров VoIP AudioSource и Camcorder AudioSource . Объявляя конфигурацию AudioSource таким образом, фреймворк автоматически запрашивает использование этих эффектов из HAL.

<preprocess>
        <stream type="voice_communication">
            <apply effect="aec"/>
            <apply effect="ns"/>
        </stream>
        <stream type="camcorder">
            <apply effect="agc"/>
        </stream>
    </preprocess>

Настройка источника

Настройка AudioSource не имеет явных требований к усилению звука или обработке звука, за исключением распознавания голоса ( VOICE_RECOGNITION ). Требования к распознаванию голоса включают:

  • Плоская частотная характеристика (+/- 3 дБ) от 100 Гц до 4 кГц
  • Конфигурация для ближнего разговора: уровень звукового давления 90 дБ, среднеквадратичное значение 2500 (16-битные выборки)
  • Уровень отслеживается линейно от -18 дБ до +12 дБ относительно 90 дБ SPL
  • THD < 1% (90 дБ SPL в диапазоне от 100 до 4000 Гц)
  • Требования к ближнему ультразвуковому излучению (для тестирования см. Тесты ближнего ультразвукового излучения ):
    • Поддержка SUPPORT_PROPERTY_MIC_NEAR_ULTRASOUND , как определено в разделе 7.8.3 CDD.
    • Поддержка одной или обеих частот дискретизации 44100 или 48000 без полосовых или сглаживающих фильтров.
  • Эффекты/предварительная обработка отключены по умолчанию

Примеры настройки различных эффектов для разных источников:

  • Подавитель шума
    • Настроен на подавление шума ветра для CAMCORDER
    • Настроен на стационарный шумоподавитель для VOICE_COMMUNICATION
  • Автоматическая регулировка усиления
    • Настроен на близкий разговор для VOICE_COMMUNICATION и основного телефонного микрофона
    • Настроен на дальний разговор для CAMCORDER

Ресурсы

Для получения более подробной информации обратитесь к следующим ресурсам: