Konfigurowanie efektów wstępnego przetwarzania

Wersja Android 10 zawiera te wymagania dotyczące rejestrowania za pomocą VOICE_COMMUNICATION:

  • W przypadku rejestrowania za pomocą VOICE_COMMUNICATION implementacje powinny zawierać systemowe usuwanie echa (AEC) na ścieżce przechwytywania.
  • Jeśli udostępniasz interfejs AEC, musi on być możliwy do znalezienia i sterowania za pomocą interfejsu API pakietu SDK.AcousticEchoCanceler

Platforma Android udostępnia efekty dźwiękowe na obsługiwanych urządzeniach w pakiecie audiofx, który jest dostępny dla deweloperów. Na przykład Nexus 10 obsługuje te efekty wstępnej obróbki:

Parowanie z instancjami AudioSource

Efekty wstępnego przetwarzania są powiązane z trybem zastosowania, w którym jest wymagane wstępne przetwarzanie. W przypadku tworzenia aplikacji na Androida przypadek użycia jest określany jako instancja AudioSource, a deweloperzy aplikacji proszą o używanie abstrakcji AudioSource zamiast rzeczywistego urządzenia z układem audio. Menedżer zasad dotyczących dźwięku w Androidzie mapuje instancję AudioSource na określoną konfigurację ścieżki przechwytywania (w tym urządzenie, wzmocnienie i wstępne przetwarzanie) zgodnie z zasadami dotyczącymi danej usługi. Deweloperom udostępnione są te źródła:

  • android.media.MediaRecorder.AudioSource.CAMCORDER
  • android.media.MediaRecorder.AudioSource.VOICE_COMMUNICATION
  • android.media.MediaRecorder.AudioSource.VOICE_CALL
  • android.media.MediaRecorder.AudioSource.VOICE_DOWNLINK
  • android.media.MediaRecorder.AudioSource.VOICE_UPLINK
  • android.media.MediaRecorder.AudioSource.VOICE_RECOGNITION
  • android.media.MediaRecorder.AudioSource.MIC
  • android.media.MediaRecorder.AudioSource.DEFAULT

Domyślne efekty wstępnej obróbki danych stosowane w przypadku każdego wystąpienia AudioSource są określone w pliku /vendor/etc/audio_effects.xml. Aby określić własne domyślne efekty dla każdej instancji AudioSource, utwórz plik /vendor/etc/audio_effects.xml i określ, które efekty przetwarzania wstępnego mają być włączone. Przykładem jest implementacja w Nexus 10 w device/samsung/manta/audio_effects.xml. AudioEffect instancje uzyskują i zwalniają sesję podczas tworzenia i usuwania, co umożliwia efektom (np. wzmacniacz głośności) utrzymywanie się przez całą sesję.

W tym przykładzie włączamy przetwarzanie wstępne dla instancji VoIPAudioSource i KameraAudioSource. Gdy deklarujesz konfigurację AudioSource w ten sposób, framework automatycznie prosi o użycie tych efektów w HAL.

<preprocess>
        <stream type="voice_communication">
            <apply effect="aec"/>
            <apply effect="ns"/>
        </stream>
        <stream type="camcorder">
            <apply effect="agc"/>
        </stream>
    </preprocess>

Dostosowanie źródła

Dostrojenie AudioSource nie wymaga wyraźnych wymagań dotyczących wzmocnienia dźwięku ani przetwarzania dźwięku z wyjątkiem rozpoznawania głosu (VOICE_RECOGNITION). Wymagania dotyczące rozpoznawania głosu:

  • Płaska charakterystyka częstotliwości (+/- 3 dB) w zakresie 100 Hz–4 kHz
  • Konfiguracja mówienia w odległości wyciągniętej ręki: 90 dB SPL odczytuje RMS 2500 (próbki 16-bitowe)
  • Poziom zmienia się liniowo od -18 dB do +12 dB w stosunku do 90 dB SPL.
  • THD < 1% (90 dB SPL w zakresie 100–4000 Hz)
  • Wymagania dotyczące testów z użyciem dźwięku o zbliżonej częstotliwości do ultradźwięków (informacje o testach znajdziesz w sekcji Testy z użyciem dźwięku o zbliżonej częstotliwości do ultradźwięków):
    • Obsługa SUPPORT_PROPERTY_MIC_NEAR_ULTRASOUND zgodnie z definicją w sekcji 7.8.3 dokumentu CDD.
    • Obsługa jednej lub obu częstotliwości próbkowania 44100 Hz lub 48000 Hz bez filtrów pasmowych ani antyaliasingu.
  • Efekty/przetwarzanie wstępne domyślnie wyłączone

Przykłady dostosowywania różnych efektów do różnych źródeł:

  • Redukcja szumów
    • Ustawienie redukcji szumu wiatru dla CAMCORDER
    • Wyciszanie szumów stacjonarnych dla VOICE_COMMUNICATION
  • Automatyczna kontrola wzmocnienia
    • Dostrojone do mikrofonu VOICE_COMMUNICATION i głównego mikrofonu telefonu
    • Dostrojenie CAMCORDER do mówienia na odległość

Materiały

Więcej informacji znajdziesz w tych materiałach:

  • Dokumentacja Androida dotycząca pakietu audiofx
  • Dokumentacja Androida dotycząca tłumienia szumów
  • Plik /device/google/crosshatch/audio_effects.xml dla Pixela 3