Settlefish: Exécuter une version stable de CTS

Cette page explique comment exécuter la suite de tests de compatibilité (CTS) pour évaluer votre appareil virtuel en fonction du code source AOSP.

Créer Cuttlefish

Avant d'exécuter CTS, créez l'appareil virtuel que vous souhaitez tester avec CTS. Pour Cuttlefish AOSP, procédez comme suit:

source build/envsetup.sh
lunch aosp_cf_x86_64_phone-userdebug
make -j

Créer la CTS

Le CTS est compilé séparément des artefacts de votre appareil. Pour créer CTS, suivez ces instructions.

À partir de la racine du même arbre dans lequel Cuttlefish a été compilé, exécutez les commandes suivantes :

source build/envsetup.sh
m -j cts WITH_DEXPREOPT_BOOT_IMG_AND_SYSTEM_SERVER_ONLY=false TARGET_PRODUCT=aosp_x86_64

Lancer des instances Cuttlefish mutualisées

À partir de la racine de l'arborescence où Cuttlefish a été créé, exécutez les commandes suivantes:

source build/envsetup.sh
lunch aosp_cf_x86_64_phone-userdebug
launch_cvd --num_instances=8 --daemon

Lorsque les instances démarrent, vérifiez que chacun des appareils est accessible via adb.

adb devices

Le résultat doit ressembler à l'exemple ci-dessous :

List of devices attached
127.0.0.1:6520  device
127.0.0.1:6521  device
127.0.0.1:6522  device
127.0.0.1:6523  device
127.0.0.1:6524  device
127.0.0.1:6525  device
127.0.0.1:6526  device
127.0.0.1:6527  device

Activer le Wi-Fi sur les instances Cuttlefish

Certains tests CTS échouent si le Wi-Fi n'est pas activé. Pour activer le Wi-Fi sur tous les appareils Cuttlefish hébergés localement, suivez ces instructions.

À partir de la racine du même arbre dans lequel Cuttlefish a été compilé, exécutez les commandes suivantes :

for SERIAL in $(adb devices | grep -E '127.+device$' | cut -f1); do
adb -s ${SERIAL} install -r -g tools/tradefederation/core/res/apks/wifiutil/WifiUtil.apk
adb -s ${SERIAL} shell su root svc wifi enable
adb -s ${SERIAL} shell am instrument -e method "connectToNetwork" -e scan_ssid "false" -e ssid "VirtWifi" -w com.android.tradefed.utils.wifi/.WifiUtil
done

Exécuter le sous-ensemble stable de CTS

Tous les tests CTS ne réussissent pas le test Cuttlefish, car certains tests sont plus adaptés aux appareils physiques. Pour exécuter la CTS avec le plan de test cts-virtual-device-stable qui suit les derniers éléments stables sur la plate-forme virtuelle, suivez ces instructions.

À partir de la racine du même arbre dans lequel Cuttlefish a été compilé, exécutez les commandes suivantes :

source build/envsetup.sh
lunch aosp_cf_x86_64_phone-userdebug
cts-tradefed run cts-virtual-device-stable --no-enable-parameterized-modules --max-testcase-run-count 2 --retry-strategy RETRY_ANY_FAILURE --reboot-at-last-retry --shard-count 8

Attendez-vous à ce que le test s'exécute de 20 à 25 minutes et imprimez un résumé semblable à celui-ci:

=============== Summary ===============
Total Run time: 22m 8s
184/184 modules completed
Total Tests       : 92483
PASSED            : 92363
FAILED            : 0
IGNORED           : 71
ASSUMPTION_FAILURE: 49
Shard 0 used: [127.0.0.1:6522]
Shard 1 used: [127.0.0.1:6525]
Shard 2 used: [127.0.0.1:6524]
Shard 3 used: [127.0.0.1:6521]
Shard 4 used: [127.0.0.1:6520]
Shard 5 used: [127.0.0.1:6527]
Shard 6 used: [127.0.0.1:6526]
Shard 7 used: [127.0.0.1:6523]
============== End of Results ==============

Effectuer un nettoyage

Une fois les tests terminés, arrêtez les appareils virtuels.

À partir de la racine du même arbre dans lequel Cuttlefish a été compilé, exécutez les commandes suivantes :

source build/envsetup.sh
lunch aosp_cf_x86_64_phone-userdebug
stop_cvd