Ejecuta pruebas de clase de rendimiento multimedia

El Conjunto de pruebas de compatibilidad (CTS) de Android incluye pruebas de clase de rendimiento multimedia para dispositivos que ejecutan Android 11 o versiones posteriores. Dado que el proceso de prueba difiere entre los dispositivos que ejecutan Android 13 y los que ejecutan Android 11 o Android 12, asegúrate de seguir las instrucciones para la versión de Android que se ejecuta en tus dispositivos.

Descargar pruebas

Descarga las siguientes pruebas:

Prueba dispositivos con Android 14 o versiones posteriores

En esta sección, se describen las pruebas necesarias para los dispositivos que ejecutan Android 14 o versiones posteriores.

Ejecuta pruebas de Calidad de codificación de video (VEQ) de la Clase 14 de rendimiento (PC14)

En Android 14, se introducen los requerimientos de Calidad de codificación de video (VEQ) para dispositivos de la Clase 14 de rendimiento (PC14). Los requisitos de VEQ de PC14 definen, básicamente, un requisito de calidad objetivo de referencia de manera medible para los codificadores de video de HW en un dispositivo PC14.

El objetivo es verificar que cada dispositivo que ejecuta Android agrupado en la clase de rendimiento 14 brinde una experiencia multimedia premium a los usuarios finales mediante la creación de contenido de video de alta calidad.

Los requerimientos de VEQ de PC14 se verifican a través de una nueva prueba del CTS llamada CtsVideoEncodingQualityHostTest.

Esta prueba del CTS ejecuta un conjunto de casos de prueba de codificación definidos por los archivos JSON de configuración y usa la API de Transformer de Jetpack Media3. Para cada caso de prueba, la curva de distorsión de velocidad (RD) del codificador que se está probando se genera codificando un flujo de bits con la configuración del codificador del archivo JSON. La curva de referencia de tasa-distorsión se incluye en el mismo archivo JSON. La fusión de evaluación multimétodo de video (VMAF) vmaf_v0.6.1.json se usa para calcular la distorsión (es decir, la pérdida de calidad).

Un caso de prueba solo puede aprobarse cuando su resultado de BDRATE-VMAF es menor o igual a cero.

La prueba del CTS de VEQ de PC14 abarca configuraciones de codificación, incluidas las siguientes:

  • Codificadores de hardware AVC y HEVC
  • Modo de control de tasa VBR
  • Codificación de P-frame/B-frame
  • 1920 x 1080 p a 30 FPS (horizontal) o 1080 x 1920 p a 30 FPS (vertical)

Prueba dispositivos con Android 13 o versiones posteriores

Antes de comenzar una ejecución de prueba, prepara los dispositivos para la prueba:

  1. Configura el dispositivo para que anuncie la clase de rendimiento de medios 13 (PC13) estableciendo el valor de la propiedad del sistema _ro.odm.build.media_performance_class en 33.

  2. Verifica que la imagen del sistema del dispositivo sea Android 13 o una versión posterior. Si bien puedes ejecutar pruebas de CTS de medios en una imagen del sistema de Android 11 o versiones posteriores, las pruebas de CTS de la cámara requieren funciones de Android 13 para PC13.

Ejecuta pruebas del ITS de la cámara

Para ejecutar solo las pruebas del ITS de la cámara, primero configura los números de serie del dispositivo y la tablet en config.yml. Después de la configuración, ejecuta pruebas para las cámaras frontal y posterior:

python tools/run_all_tests.py camera=[PRIMARY_REAR_CAMERA_ID] scenes=2_c
python tools/run_all_tests.py camera=[PRIMARY_FRONT_CAMERA_ID] scenes=2_c

Ejecuta pruebas de clase de rendimiento del contenido multimedia

El plan de pruebas de cts-media-performance-class verifica los requisitos del CDD para los requisitos de la clase de rendimiento de medios (CDD Sección 2.2.7.1) y los requisitos de la cámara (CDD Sección 2.2.7.2). Ejecuta la prueba cts-media-performance-class:

cts-tradefed run cts-media-performance-class

Para ejecutar solo las pruebas de CTS de la cámara, haz lo siguiente:

cts-tradefed run singleCommand cts --disable-reboot -m CtsCameraTestCases -t android.hardware.camera2.cts.ExtendedCameraCharacteristicsTest#testCameraPerfClassCharacteristics

Para ejecutar solo las pruebas de CTS de medios, haz lo siguiente:

cts-tradefed run singleCommand cts --disable-reboot -m CtsMediaPerformanceClassTestCases

Ejecuta las pruebas de CTS de MediaDrm

Las pruebas de CTS de MediaDrm verifican los requisitos de MediaDrm en la sección 2.2.7.1 del CDD. Ejecuta las pruebas de CTS de MediaDrm:

cts-tradefed run singleCommand cts --disable-reboot -c android.mediapc.cts.PerformanceClassTest -m testSecureHwDecodeSupport
cts-tradefed run singleCommand cts --disable-reboot -c android.mediapc.cts.PerformanceClassTest -m testMediaDrmSecurityLevelHwSecureAll

Ejecuta pruebas del CTS del sistema de archivos

Las pruebas del CTS del sistema de archivos verifican los requisitos de rendimiento en la sección 2.2.7.4 del CDD.

  • Para probar los requisitos de lectura y escritura secuenciales, haz lo siguiente:

    cts-tradefed run singleCommand cts --disable-reboot -m CtsFileSystemTestCases -t android.filesystem.cts.SequentialRWTest

  • Para probar los requisitos de lectura y escritura aleatorias, haz lo siguiente:

    cts-tradefed run singleCommand cts --disable-reboot -m CtsFileSystemTestCases -t android.filesystem.cts.RandomRWTest

Prueba dispositivos Android 11 o 12

Para probar dispositivos que ejecutan Android 11 o 12, primero configura los dispositivos de prueba (la configuración difiere entre la versión de Android y los dispositivos userdebug en comparación con los dispositivos user) y, luego, ejecuta las pruebas de CTS y del verificador de CTS.

Anuncia la clase de rendimiento del contenido multimedia

Sigue estos pasos para configurar dispositivos de prueba para que anuncien la clase de rendimiento correcta con la propiedad del sistema ro.odm.build.media_performance_class:

  • Para la clase de rendimiento 12 (PC12), establece el valor de la propiedad en 31.

  • Para la clase de rendimiento 11 (PC11), establece el valor de la propiedad en 30.

Dispositivos userdebug

Para configurar dispositivos userdebug de Android, haz lo siguiente:

  • Dispositivos userdebug de Android 12:

    adb root
adb shell setprop ro.odm.build.media_performance_class 31   // use 30 for PC11
adb shell stop && sleep 1 && adb shell start
adb shell pkill -f camera

  • Dispositivos userdebug con Android 11:

    adb root
adb shell setenforce 0
adb shell setprop ro.odm.build.media_performance_class 31   // use 30 for PC11
adb shell appops set com.android.cts.verifier MANAGE_EXTERNAL_STORAGE 0

Puedes establecer la propiedad del sistema ro.odm.build.media_performance_class solo una vez por reinicio (pero no es necesario que reinicies el dispositivo antes de establecerla por primera vez).

Dispositivos del usuario

Para configurar dispositivos de usuario de Android, agrega la propiedad ro.odm.build.media_performance_class con el valor de clase de rendimiento seleccionado al archivo product.prop:

ro.odm.build.media_performance_class=31   // use 30 for PC11

En el caso de los dispositivos de los usuarios que ejecutan Android 11, realiza los siguientes pasos adicionales:

  1. Selecciona los mejores elementos del parche [1627181] Add media performance class property to sepolicy.

  2. Establece MANAGE_EXTERNAL_STORAGE para com.android.cts.verifier:

    adb shell appops set com.android.cts.verifier MANAGE_EXTERNAL_STORAGE 0

Ejecuta pruebas de CTS y ITS

Compila el CTS y el CTS Verifier con los parches descargados aplicados y, luego, ejecuta la versión apropiada de Android para tus dispositivos de prueba (CTS de Android 11 para dispositivos Android 11 y CTS de Android 12 para dispositivos Android 12).

Contenido multimedia

Para ejecutar las pruebas de CTS de medios, haz lo siguiente:

cts-tradefed run singleCommand cts --disable-reboot -m CtsMediaPerformanceClassTestCases

Cámara

Para ejecutar las pruebas de CTS de la cámara, haz lo siguiente:

cts-tradefed run singleCommand cts --disable-reboot -m CtsCameraTestCases -t android.hardware.camera2.cts.ExtendedCameraCharacteristicsTest#testCameraPerfClassCharacteristics
python tools/run_all_tests.py device=DEVICE camera=PRIMARY_CAMERA_ID chart=CHART_ID scenes=2_c

Para dispositivos con Android 12:

cts-tradefed run singleCommand cts --disable-reboot -m CtsCameraApi31TestCases

Hardware

Para ejecutar las pruebas de CTS de hardware, haz lo siguiente:

cts-tradefed run singleCommand cts --disable-reboot -m CtsFileSystemTestCases -t android.filesystem.cts.RandomRWTest
cts-tradefed run singleCommand cts --disable-reboot -m CtsFileSystemTestCases -t android.filesystem.cts.SequentialRWTest