La estructura general de la configuración del módulo sigue un patrón similar al de la configuración XML normal de Tradefed, pero con algunas restricciones debido a que se ejecutan como parte de un paquete.
Lista de etiquetas permitidas
AndroidTest.xml o, de manera más general, la configuración del módulo solo puede contener las siguientes etiquetas XML: target_preparer, multi_target_preparer, test y metrics_collector.
Aunque esa lista parece restrictiva, te permite definir con precisión las necesidades de configuración del módulo de prueba y la prueba que se ejecutará.
NOTA: Consulta la configuración de XML de Tradefed si necesitas hacer un repaso sobre las diferentes etiquetas.
Los objetos como build_provider o result_reporter generarán un ConfigurationException si se intentan ejecutar desde la configuración de un módulo. Esto es para evitar la expectativa de que estos objetos realicen alguna tarea desde un módulo.
Ejemplo de configuración del módulo
<configuration description="Config for CTS Gesture test cases">
<option name="test-suite-tag" value="cts" />
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="cleanup-apks" value="true" />
<option name="test-file-name" value="CtsGestureTestCases.apk" />
</target_preparer>
<test class="com.android.tradefed.testtype.AndroidJUnitTest" >
<option name="package" value="android.gesture.cts" />
<option name="runtime-hint" value="10m50s" />
</test>
</configuration>
Esta configuración describe una prueba que requiere que se
instale CtsGestureTestCases.apk y ejecutará una instrumentación en el paquete android.gesture.cts.
Etiquetas de inclusión <include> y <template-include>
No se recomienda el uso de <include> y <template-include> en los parámetros de configuración del módulo. No se garantiza que funcionen como se espera.
Caso especial para la etiqueta metrics_collector
Se permite metrics_collector, pero se limita a la clase FilePullerLogCollector para especificar un archivo o directorio determinado que se extraerá y registrará para el módulo. Esto es útil si dejas registros en una ubicación en particular y quieres recuperarlos automáticamente.
Configuración de ejemplo:
<configuration description="Config for CTS UI Rendering test cases">
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="cleanup-apks" value="true" />
<option name="test-file-name" value="CtsUiRenderingTestCases.apk" />
</target_preparer>
<test class="com.android.tradefed.testtype.AndroidJUnitTest" >
<option name="package" value="android.uirendering.cts" />
<option name="runtime-hint" value="11m55s" />
<option name="runner" value="android.uirendering.cts.runner.UiRenderingRunner" />
<option name="isolated-storage" value="false" />
</test>
<!-- Collect the files in the dump directory for debugging -->
<metrics_collector class="com.android.tradefed.device.metric.FilePullerLogCollector">
<option name="directory-keys" value="/sdcard/UiRenderingCaptures" />
<option name="collect-on-run-ended-only" value="true" />
</metrics_collector>
</configuration>
¿Qué sucede con la información de compilación o las descargas?
La definición de las etiquetas permitidas podría dar la impresión incorrecta de que un módulo no obtendrá información de compilación. Eso no es cierto.
La información de compilación se proporciona desde la configuración a nivel del paquete y será compartida por todos los módulos del paquete. Esto permite una sola configuración de nivel superior para el paquete para ejecutar todos los módulos que forman parte de él.
Por ejemplo, en lugar de que cada módulo del Conjunto de pruebas de compatibilidad (CTS) consulte de forma individual la información, los tipos de dispositivo, etc., la configuración de nivel del paquete de CTS (cts.xml) lo hace una vez y cada módulo recibirá esa información si la solicita.
Para que los objetos de un módulo reciban la información de compilación, deben hacer lo mismo que en la configuración normal de Tradefed: implementar la interfaz IBuildReceiver para recibir el IBuildInfo. Consulta Cómo realizar pruebas con el dispositivo para obtener más detalles.
Campos de metadatos
Una gran cantidad de módulos de prueba incluyen algunas especificaciones de metadata, cada una de las cuales tiene un objetivo único.
Ejemplo:
<option name="config-descriptor:metadata" key="component" value="framework" />
<option name="config-descriptor:metadata" key="parameter" value="instant_app" />
<option name="config-descriptor:metadata" key="parameter" value="multi_abi" />
<option name="config-descriptor:metadata" key="parameter" value="secondary_user" />
Componente
Los metadatos component describen el componente general de Android que el módulo pretende probar. No tiene ningún impacto directo en la ejecución de la prueba y se usa principalmente con fines organizativos.
La lista actualizada de componentes permitidos para CTS está disponible en CtsConfigLoadingTest. Esta prueba falla en la etapa previa al envío si se agrega un componente que no existe a un módulo de CTS.
Puedes filtrar la ejecución de un paquete según los componentes mediante module-metadata-include-filter y module-metadata-exclude-filter.
Ejemplo:
--module-metadata-include-filter component framework
En este ejemplo, solo se ejecuta el módulo de prueba anotado con el componente framework.
Parámetro
Los metadatos de parameter son informativos y afectan la ejecución de la prueba. Especifica a qué modo de Android se aplica el módulo de prueba.
En este caso, los modos se limitan a los modos de Android de alto nivel, como instant apps, secondary users o different abis.
Durante la ejecución del paquete, si el modo se aplica a la prueba, se crean varias variaciones del módulo de prueba según el modo. Cada variante ejecuta pruebas similares, pero en diferentes modos.
instant_app: Crea una variación de las pruebas que instalan APKs como apps instantáneas.multi_abi: Crea una variación de las pruebas para cada ABI compatible con el dispositivo.secondary_user: Crea una variación de las pruebas que instalan los APK y ejecutan pruebas como un usuario secundario.
Recopilación y procesamiento posterior de métricas para los módulos de prueba de rendimiento
En el caso de los módulos de prueba de rendimiento, se permiten metrics_collector y metric_post_processor a nivel de módulo, ya que son esenciales para las pruebas de rendimiento.
Los recopiladores y los procesadores posteriores de métricas a nivel del módulo pueden ser específicos del módulo.
No se recomienda especificar postprocesadores en el nivel superior y en el nivel del módulo.
Una configuración del módulo de prueba de rendimiento debe incluir los metadatos test-type con el valor performance, como:
xml
<option name="config-descriptor:metadata" key="test-type" value="performance" />
Sin esto, si una configuración de prueba incluye metric_collector distinto de FilePullerLogCollector o cualquier metric_post_processor, la prueba
falla en el envío previo.
Ejemplo de configuración del módulo de prueba de rendimiento:
<configuration description="Runs sample performance test.">
<!-- Declare as a performance test module -->
<option name="config-descriptor:metadata" key="test-type" value="performance" />
<option name="test-tag" value="hello-world-performance-test" />
<test class="com.android.tradefed.testtype.HostTest" >
<option name="class" value="android.test.example.helloworldperformance.HelloWorldPerformanceTest" />
</test>
<!-- Add module-level post processor MetricFilePostProcessor -->
<metric_post_processor class="com.android.tradefed.postprocessor.MetricFilePostProcessor">
<option name="aggregate-similar-tests" value="true" />
<option name="enable-per-test-log" value="false" />
</metric_post_processor>
</configuration>