Informacje o wersji CTS 17

Ta strona zawiera najważniejsze zmiany w CTS wprowadzone w CTS 17 R1.

Ulepszenia infrastruktury

Agregacja i raportowanie wyników testów

Struktura raportowania CTS-V (w tym CameraITS) została zmieniona, aby obsługiwać szczegółowe wyniki podtestów. To ulepszenie umożliwia równoległe wykonywanie podtestów, co skraca łączny czas działania, oraz ponowne uruchamianie tylko tych podtestów, które się nie powiodły, zamiast całego modułu.

Dzielenie tokenów

Rozwiązaliśmy problem z funkcją enable-token-sharding, która czasami nie rozpoznaje próbek z kartami SIM, co powoduje nieprawidłowe działanie testów.

Ulepszenia wydajności

Optymalizacja testów biometrycznych

Zestaw testów biometrycznych w CTS-V łączy kilka kluczowych testów opartych na czasie, co zmniejsza liczbę monitów uwierzytelniania ze 120 do 72.

Modernizacja łączności i pomiaru odległości

Ręczny test Presence test, który wymaga standardowej konfiguracji urządzenia w odległości 1 m w celu dokładnej weryfikacji, został zastąpiony w pełni zautomatyzowanym modułem Ranging (Ranging test).

Modernizacja testów Wi-Fi

Aktualizacje pakietu testów Wi-Fi obejmują wprowadzenie nowych testów Unsynchronized Service Discovery (USD), migrację dotychczasowych Permission tests do zmodernizowanego frameworka oraz usunięcie starszych ręcznych Connection tests.

Ulepszenia multimediów i telekomunikacji

Wprowadziliśmy test Secure Playback, aby sprawdzić możliwości bezpiecznego odtwarzania, zapewniając prawidłowe wyświetlanie obrazu i spójność liczby klatek na sekundę w konfiguracji testu bezpiecznego odtwarzania. Jest to test CTS Verifier, który wymaga narzędzia do analizy odtwarzania na urządzeniu peryferyjnym.

Automatyzacja testów telekomunikacyjnych

Ręczne testy telekomunikacyjne zostały zastąpione automatycznym modułem CtsTelecomTests w CTS-V-HOST.

Moduły CTS

Liczba modułów testowych i elementów testowania jest następująca:

• Około 1244 moduły w zależności od typu urządzenia.
• Około 3,1 mln elementów testowania dla pojedynczego ABI.

185 nowych modułów

• CtsAActivityManagerTest
• CtsAlarmAtomHostTestCases
• CtsAlarmAtomHostTestCases[instant]
• CtsAllowlistTestCases
• CtsAllowlistTestCases[instant]
• CtsAngleEnd2EndTestCases
• CtsAnomalyDetectorTests
• CtsAppcompatStateAtomHostTestCases
• CtsAppcompatStateAtomHostTestCases[instant]
• CtsAppExitAtomHostTestCases
• CtsAppExitAtomHostTestCases[instant]
• CtsAppFunctionNoQueryAllPackagesTestCases
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-clone-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-private-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-secondary-user]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-work-profile]
• CtsAppFunctionsAtomHostTestCases
• CtsAppFunctionsAtomHostTestCases[instant]
• CtsAppHibernationAtomHostTestCases
• CtsAppHibernationAtomHostTestCases[instant]
• CtsAppInteractionTestCases
• CtsAppInteractionTestCases[run-on-clone-profile]
• CtsAppInteractionTestCases[run-on-private-profile]
• CtsAppInteractionTestCases[run-on-secondary-user]
• CtsAppInteractionTestCases[run-on-work-profile]
• CtsAppOpsAtomHostTestCases
• CtsAppOpsAtomHostTestCases[instant]
• CtsAppStartAtomHostTestCases
• CtsAppStartAtomHostTestCases[instant]
• CtsBackportedFixesAtomHostTestCases
• CtsBackportedFixesAtomHostTestCases[instant]
• CtsBatteryCycleAtomHostTestCases
• CtsBatteryCycleAtomHostTestCases[instant]
• CtsBatteryStatsAtomHostTestCases
• CtsBatteryStatsAtomHostTestCases[instant]
• CtsBinderStatsAtomHostTestCases
• CtsBinderStatsAtomHostTestCases[instant]
• CtsBluetoothAtomHostTestCases
• CtsBluetoothAtomHostTestCases[instant]
• CtsConscryptTestCases
• CtsContactsPickerCoreTestCases
• CtsContactsPickerCoreTestCases[run-on-clone-profile]
• CtsContactsPickerCoreTestCases[run-on-private-profile]
• CtsContactsPickerCoreTestCases[run-on-work-profile]
• CtsContactsPickerCoreTestCasesSdk36
• CtsContactsProviderHostTestCases
• CtsContactsProviderSessionTestCases
• CtsContactsProviderTestsStrictSqlCheckSdk37
• CtsContentPccTestCases
• CtsContentRestrictionTestCases
• CtsContentSafetyServiceTestCases
• CtsContextualModeManagerTestCases
• CtsContextualModeManagerTestCases[run-on-clone-profile]
• CtsContextualModeManagerTestCases[run-on-private-profile]
• CtsContextualModeManagerTestCases[run-on-secondary-user]
• CtsContextualModeManagerTestCases[run-on-work-profile]
• CtsCoreGraphicsAtomHostTestCases
• CtsCoreGraphicsAtomHostTestCases[instant]
• CtsCpuAtomHostTestCases
• CtsCpuAtomHostTestCases[instant]
• CtsCredentialsAtomHostTestCases
• CtsCredentialsAtomHostTestCases[instant]
• CtsDevicePowerAtomHostTestCases
• CtsDevicePowerAtomHostTestCases[instant]
• CtsDeviceStateAtomHostTestCases
• CtsDeviceStateAtomHostTestCases[instant]
• CtsDisplayAtomHostTestCases
• CtsDisplayAtomHostTestCases[instant]
• CtsDisplayStaticDeviceStateTestCases
• CtsDisplayStaticDeviceStateTestCases[instant]
• CtsGameManagerAtomHostTestCases
• CtsGameManagerAtomHostTestCases[instant]
• CtsGnssAtomHostTestCases
• CtsGnssAtomHostTestCases[instant]
• CtsGpuTestCases
• CtsGpuTestCases[instant]
• CtsHardwareHealthAtomHostTestCases
• CtsHardwareHealthAtomHostTestCases[instant]
• CtsJobSchedulerAtomHostTestCases
• CtsJobSchedulerAtomHostTestCases[instant]
• CtsLogcatHostTestCases
• CtsMediaAtomHostTestCases
• CtsMediaAtomHostTestCases[instant]
• CtsMediaRouterHostTestCases
• CtsMediaRouterHostTestCases[instant]
• CtsMemoryAtomHostTestCases
• CtsMemoryAtomHostTestCases[instant]
• CtsMemorySafetyAtomHostTestCases
• CtsMemorySafetyAtomHostTestCases[instant]
• CtsMotionCuesTestCases
• CtsMotionCuesTestCases[instant]
• CtsMultisensoryTestCases
• CtsMultisensoryTestCases[instant]
• CtsMultisensoryTestCases[run-on-clone-profile]
• CtsMultisensoryTestCases[run-on-private-profile]
• CtsMultisensoryTestCases[run-on-secondary-user]
• CtsMultisensoryTestCases[run-on-work-profile]
• CtsNativeNdkAllowlistTest
• CtsNativeServiceTest
• CtsNetAtomHostTestCases
• CtsNetAtomHostTestCases[instant]
• CtsNetSecConfigCustomTrustManagerTestCases
• CtsNetSecConfigCustomTrustManagerTestCases[instant]
• CtsNetSecConfigEncryptedClientHelloTestCases
• CtsNetSecConfigEncryptedClientHelloTestCases[instant]
• CtsNetSecEncryptedClientHelloTestCases
• CtsNetSecEncryptedClientHelloTestCases[instant]
• CtsNetTestCasesLocalNetNoPermissions
• CtsNetTestCasesLocalNetNoPermissions[instant]
• CtsNotificationAtomHostTestCases
• CtsNotificationAtomHostTestCases[instant]
• CtsNpuManagerMoblyTestCases
• CtsNpuManagerTestCases
• CtsPackageManagerIsolatedSplitHostTestCases
• CtsPackageManagerSplitHostTestCases
• CtsPccFeatureTests
• CtsPccFeatureTests[run-on-clone-profile]
• CtsPccFeatureTests[run-on-private-profile]
• CtsPccFeatureTests[run-on-secondary-user]
• CtsPccFeatureTests[run-on-work-profile]
• CtsPccProcessTests
• CtsPccSandboxManagerNativeTest
• CtsPccSecurityTestCases
• CtsPerfAtomHostTestCases
• CtsPerfAtomHostTestCases[instant]
• CtsPerfettoAtomHostTestCases
• CtsPerfettoAtomHostTestCases[instant]
• CtsPerformanceHintManagerAtomHostTestCases
• CtsPerformanceHintManagerAtomHostTestCases[instant]
• CtsPermissionStateAtomHostTestCases
• CtsPermissionStateAtomHostTestCases[instant]
• CtsPersonalContextTestCases
• CtsPersonalContextTestCases[run-on-clone-profile]
• CtsPersonalContextTestCases[run-on-private-profile]
• CtsPersonalContextTestCases[run-on-secondary-user]
• CtsPersonalContextTestCases[run-on-work-profile]
• CtsPowerAtomHostTestCases
• CtsPowerAtomHostTestCases[instant]
• CtsPowerManagerAtomHostTestCases
• CtsPowerManagerAtomHostTestCases[instant]
• CtsPowerManagerPccTestCases
• CtsPowerManagerPccTestCases[instant]
• CtsPowerManagerPccTestCases[run-on-work-profile]
• CtsSerialTestCases
• CtsSettingsStatsAtomHostTestCases
• CtsSettingsStatsAtomHostTestCases[instant]
• CtsSharesheetAppLockTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases[instant]
• CtsSoundTriggerPccTestCases
• CtsStatsdAtomHostRebootTestCases
• CtsStatsdAtomHostRebootTestCases[instant]
• CtsStopAndKillHostTest
• CtsTelecomModuleTests
• CtsTelephonyAtomHostTestCases
• CtsTelephonyAtomHostTestCases[instant]
• CtsTelephonySatelliteTestCases
• CtsTextClassifierPccTestCases
• CtsTlsAtomHostTestCases
• CtsTlsAtomHostTestCases[instant]
• CtsTrustTokenServiceTestCases
• CtsTrustTokenServiceTestCases[instant]
• CtsUprobeStatsTest
• CtsUsageEventsPccTestCases
• CtsUsbAtomHostTestCases
• CtsUsbAtomHostTestCases[instant]
• CtsUsbManagerTestCases[run-on-clone-profile]
• CtsUsbManagerTestCases[run-on-private-profile]
• CtsUsbManagerTestCases[run-on-secondary-user]
• CtsUsbManagerTestCases[run-on-work-profile]
• CtsUsersAtomHostTestCases
• CtsUsersAtomHostTestCases[instant]
• CtsVibratorAtomHostTestCases
• CtsVibratorAtomHostTestCases[instant]
• CtsVirtualDevicesComputerControlTests
• CtsVoiceInteractionAtomHostTestCases
• CtsVoiceInteractionAtomHostTestCases[instant]
• CtsWifiAtomHostTestCases
• CtsWifiAtomHostTestCases[instant]
• CtsWindowManagerHostTestCases
• MctsVideoTestCases
• MtsWebAppTestCases
• PccServiceNonPccClientTest
• PccServicePccClientTest
• VmMultiTenancyTests.CTS

16 usuniętych modułów

• AdsPersonalizationStatusTest
• CtsAppFgsTestCases[instant]
• CtsCameraHeadlessSystemUserTestCases
• CtsCarBuiltinApiHostTestCases
• CtsFgsTimeoutTestCases[instant]
• CtsHealthConnectHostSideDeviceTestCases
• CtsHealthConnectHostTestCases
• CtsInstalledLoadingProgressHostTests
• CtsSandboxedAdIdManagerTests
• CtsSandboxedAppSetIdManagerTests
• CtsSandboxedFledgeManagerTests
• CtsSandboxedMeasurementManagerTests
• CtsSandboxedTopicsManagerTests
• CtsShortFgsTestCases[instant]
• CtsVideoEncodingQualityHostTestCases[instant]
• MctsTextClassifierTestCases

17 nowych testów w CTS Verifier

Dodaliśmy 36 nowych elementów testowania CTS-V-HOST, w tym testy interaktywne, elementy testowania Verifier oparte na hoście.

Dodano 36 testów z 7 modułów

Nazwa modułu	Lista nowo dodanych elementów testowania	Identyfikator wymagania lub interfejs API
CtsNotificationSizeVerifierHostTest	android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeDisabled	Test zachowania interfejsu API
CtsPermissionInteractiveTestCases	android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonColorCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonSupportsRtlLayout android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonPaddingCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonIconOnly android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeMorphsOnPress android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeCustomization	dokument CDD 3.8.18 [C-0-1]
CtsSysuiInteractiveTestCases	android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_alreadyShowing android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_multipleCallsInShortTime	android.app.StatusBarManager#showPowerMenu
CtsUsbTypecTestCases	com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Cdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Dcp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Sdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testPowerProfileSourceFixed	dokument CDD 7.7.1 [C-SR-3]
CtsTelecomTest	CtsTelecomTest#test_call_audio_for_voice_and_voip_calls CtsTelecomTest#test_incall_ui_shows_when_screen_locked	Migracja dotychczasowych testów telekomunikacyjnych
CtsWifiConnectionTests	NetworkRequestTests#test_with_a_specific_ssid_and_bssid NetworkRequestTests#test_with_invalid_credential_in_network_specifier NetworkRequestTests#test_with_pattern_network_specifier NetworkRequestTests#test_with_unavailable_network_specifier NetworkSuggestionTests#test_that_suggestion_modification_in_place NetworkSuggestionTests#test_with_connection_failure NetworkSuggestionTests#test_with_ssid_and_bssid_specified NetworkSuggestionTests#test_with_ssid_and_post_connect_broadcast NetworkSuggestionTests#test_with_ssid_specified	java.lang.String android.net.MacAddress android.net.NetworkSpecifier android.net.NetworkRequest,android.net.ConnectivityManager.NetworkCallback,int android.os.PatternMatcher java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionUserApprovalStatusListener android.net.wifi.WifiManager.SuggestionConnectionStatusListener java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionConnectionStatusListener
CtsWifiUsdTests	WifiUsdTest#test_active_subscriber_exchange WifiUsdTest#test_bidirectional_large_message_exchange WifiUsdTest#test_bidirectional_message_exchange WifiUsdTest#test_passive_subscriber_exchange	android.net.wifi.usd.PublishSessionCallback android.net.wifi.usd.SubscribeSessionCallback android.net.wifi.usd.DiscoveryResult

Dodano 10 nowych testów w 5 innych sekcjach Verifier

Sekcja	Lista nowo dodanych elementów testowania
AUDIO	Test opóźnienia komunikacji audio Test ścieżek danych audio USB – wielokanałowy Test odciążania MMAP PCM audio Test parametrów odtwarzania audio Test obciążenia audio
CAMERA	Test kombinacji funkcji Camera ITS
FEATURES	Test zakraplacza
MEDIA	Test bezpiecznego odtwarzania
SYSUI	Test warstwy przypiętego okna Test zadań, które można samodzielnie przenosić