Verificação da capacidade de teste de HAL

O conjunto de testes do fornecedor (VTS, na sigla em inglês) do Android 9 oferece suporte a um método de tempo de execução para usar a configuração do dispositivo e identificar quais testes do VTS serão ignorados para esse destino de dispositivo.

Flexibilidade do teste VTS

Desde o Android 8.0, os testes do VTS são obrigatórios para todos os dispositivos lançados com Android 8.0 e versões mais recentes. No entanto, nem todos os testes do VTS se aplicam a todos os destinos de dispositivo. Exemplo:

• Se um dispositivo específico não for compatível com uma HAL de teste (por exemplo, IR), o VTS não precisará executar testes para essa HAL no destino do dispositivo.
• Se vários dispositivos compartilharem o mesmo SoC e imagem do fornecedor, mas tiverem funcionalidades de hardware diferentes, o VTS vai precisar determinar se um teste deve ser executado ou ignorado para um destino de dispositivo específico.

Tipos de teste do VTS

O VTS inclui os seguintes tipos de teste:

• Os testes de conformidade garantem a compatibilidade entre as partições de framework e de fornecedor. Esses testes precisam ser executados (e aprovados) em dispositivos lançados com o Android 8.0 ou mais recente.
• Os testes de não conformidade ajudam os fornecedores a melhorar a qualidade do produto (performance/fuzzing etc.). Esses testes são opcionais para os fornecedores.

Se um teste é de compliance ou não, isso depende do plano a que ele pertence. Os testes executados com o plano do VTS são considerados testes de conformidade.

Determinar HALs compatíveis

O VTS pode usar os seguintes arquivos para determinar se o destino do dispositivo é compatível com um HAL específico:

• /system/compatibility_matrix.xml. Reivindica as instâncias HAL necessárias para o framework. Exemplo:

  <hal format="hidl" optional="true">
      <name>android.hardware.vibrator</name>
      <version>1.0-1</version>
      <interface>
         <name>IVibrator</name>
         <instance>default</instance>
      </interface>
  </hal>

  • O atributo optional indica se a HAL é estritamente obrigatória para o framework.
  • O arquivo pode conter várias entradas para a mesma HAL (com o mesmo nome), mas com versões e interfaces diferentes.
  • O arquivo pode conter várias configurações de version para a mesma entrada, indicando que a estrutura pode funcionar com versões diferentes.
  • version1.0-1 significa que o framework pode funcionar com a versão 1.0, a mais baixa, e não exige uma versão superior a 1.1.
• Dispositivo manifest.xml. Reivindica as instâncias HAL fornecidas pelo fornecedor. Exemplo:

  <hal format="hidl">
      <name>android.hardware.vibrator</name>
      <transport>hwbinder</transport>
      <version>1.2</version>
      <interface>
          <name>IVibrator</name>
         <instance>default</instance>
      </interface>
  </hal>

  • O arquivo pode conter várias entradas para a mesma HAL (com o mesmo nome), mas com versões e interfaces diferentes.
  • Se o arquivo tiver apenas uma configuração version para uma entrada, version1.2 significa que o fornecedor oferece suporte a todas as versões de 1.0 a 1.2.
• lshal. Uma ferramenta no dispositivo que mostra informações de tempo de execução sobre os serviços HAL registrados com o hwservicemanager. Exemplo:

  android.hardware.vibrator@1.0::IVibrator/default

  
  lshal também mostra todos os HALs com implementações de transferência (ou seja, com o arquivo -impl.so correspondente no dispositivo). Exemplo:

  android.hardware.nfc@1.0::I*/* (/vendor/lib/hw/)
  android.hardware.nfc@1.0::I*/* (/vendor/lib64/hw/)

Testes de compliance

Para testes de conformidade, o VTS depende do manifesto do fornecedor para determinar (e testar) todas as instâncias de HAL fornecidas pelo dispositivo. Fluxo de decisão:

Testes de não conformidade

Para testes de não conformidade, o VTS depende do manifesto do fornecedor e das saídas lshal para determinar (e testar) as HALs experimentais não reivindicadas no arquivo manifest.xml. Fluxo de decisão:

Localizar o manifesto do fornecedor

O VTS verifica o arquivo manifest.xml do fornecedor nos seguintes locais e nesta ordem:

1. /vendor/etc/vintf/manifest.xml + manifesto ODM (se o mesmo HAL estiver definido nos dois lugares, o manifesto ODM vai substituir o de /vendor/etc/vintf/manifest.xml)
2. /vendor/etc/vintf/manifest.xml
3. Arquivo manifest.xml do ODM, carregado dos seguintes arquivos na seguinte ordem:
   1. /odm/etc/vintf/manifest_$(ro.boot.product.hardware.sku).xml
   2. /odm/etc/vintf/manifest.xml
   3. /odm/etc/manifest_$(ro.boot.product.hardware.sku).xml
   4. /odm/etc/manifest.xml
   5. /vendor/manifest.xml

Verificador de capacidade de teste do VTS

O vts_testibility_checker é um binário empacotado com o VTS e usado pelo framework de teste do VTS no tempo de execução para determinar se um determinado teste de HAL é testável ou não. Ele se baseia em libvintf para carregar e analisar o arquivo de manifesto do fornecedor e implementa o fluxo de decisão descrito na seção anterior.

Para usar o app vts_testability_check:

• Para um teste de compliance:

  vts_testability_check -c -b <bitness>  <hal@version>

• Para um teste de não conformidade:

  vts_testability_check -b <bitness>  <hal@version>

A saída de vts_testability_check usa o seguinte formato JSON:

{testable: <True/False> Instances: <list of instance names of HAL service>}

Determinar HALs acessados

Para determinar quais HALs são acessados pelos testes do VTS, verifique se cada teste de HAL usa o modelo VtsHalHidlTargetTestEnvBase para registrar os HALs acessados no teste. O framework de teste do VTS pode extrair os HALs registrados durante o pré-processamento do teste.

Para testes de compliance, você também pode verificar /system/etc/vintf/manifest.xml. Se um HAL for definido aqui, o VTS vai testá-lo. Para os serviços de HAL fornecidos pelo sistema (por exemplo, graphics.composer/vr), os HALs são declarados em /system/manifest.xml.