Примечания к выпуску CTS 17

На этой странице представлены основные изменения в CTS, внесенные в CTS 17 R1.

Улучшение инфраструктуры

Агрегирование и представление результатов тестирования

The CTS-V reporting structure (including CameraITS) has been refactored to support granular subtest results. This enhancement enables parallel execution of subtests to reduce total runtime, and focused reruns of failed subtests rather than the full module.

шардинг токенов

Исправлена ​​ошибка в функции enable-token-sharding, из-за которой иногда не удавалось распознать образцы с SIM-картами, что приводило к некорректному запуску тестов.

Повышение эффективности

Оптимизация биометрического тестирования

Биометрический тестовый пакет в CTS-V объединяет несколько проверок ключей, основанных на времени, что позволяет сократить количество запросов на аутентификацию со 120 до 72.

Модернизация связи и определения дальности

Ручная Presence test , требующая стандартизированной установки устройства на расстоянии 1 м для точной проверки, была заменена полностью автоматизированным модулем измерения расстояния ( Ranging test ).

модернизация тестирования Wi-Fi

Updates to the Wi-Fi test suite include the introduction of new Unsynchronized Service Discovery (USD) tests, migration of existing Permission tests into a modernized framework, and the removal of legacy manual Connection tests .

Улучшения в области мультимедиа и телекоммуникаций.

The Secure Playback test is introduced to validate secure playback capabilities, ensuring correct video display and frame rate consistency secure playback test setup . This is a CTS Verifier test and requires a Peripheral Playback analysis tool.

Автоматизация тестирования в телекоммуникациях

Ручные тесты телекоммуникаций заменены автоматизированным модулем CtsTelecomTests в CTS-V-HOST .

Модули CTS

Количество тестовых модулей и тестовых примеров следующее:

• Примерно 1244 модуля в зависимости от типа устройства.
• Примерно 3,1 миллиона тестовых случаев для оценки лодыжечно-брахиального индекса (ЛБИ).

185 новых модулей

• CtsAActivityManagerTest
• CtsAlarmAtomHostTestCases
• CtsAlarmAtomHostTestCases[instant]
• CtsAllowlistTestCases
• CtsAllowlistTestCases[instant]
• CtsAngleEnd2EndTestCases
• CtsAnomalyDetectorTests
• CtsAppcompatStateAtomHostTestCases
• CtsAppcompatStateAtomHostTestCases[instant]
• CtsAppExitAtomHostTestCases
• CtsAppExitAtomHostTestCases[instant]
• CtsAppFunctionNoQueryAllPackagesTestCases
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-clone-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-private-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-secondary-user]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-work-profile]
• CtsAppFunctionsAtomHostTestCases
• CtsAppFunctionsAtomHostTestCases[instant]
• CtsAppHibernationAtomHostTestCases
• CtsAppHibernationAtomHostTestCases[instant]
• CtsAppInteractionTestCases
• CtsAppInteractionTestCases[run-on-clone-profile]
• CtsAppInteractionTestCases[run-on-private-profile]
• CtsAppInteractionTestCases[run-on-secondary-user]
• CtsAppInteractionTestCases[run-on-work-profile]
• CtsAppOpsAtomHostTestCases
• CtsAppOpsAtomHostTestCases[instant]
• CtsAppStartAtomHostTestCases
• CtsAppStartAtomHostTestCases[instant]
• CtsBackportedFixesAtomHostTestCases
• CtsBackportedFixesAtomHostTestCases[instant]
• CtsBatteryCycleAtomHostTestCases
• CtsBatteryCycleAtomHostTestCases[instant]
• CtsBatteryStatsAtomHostTestCases
• CtsBatteryStatsAtomHostTestCases[instant]
• CtsBinderStatsAtomHostTestCases
• CtsBinderStatsAtomHostTestCases[instant]
• CtsBluetoothAtomHostTestCases
• CtsBluetoothAtomHostTestCases[instant]
• CtsConscryptTestCases
• CtsContactsPickerCoreTestCases
• CtsContactsPickerCoreTestCases[run-on-clone-profile]
• CtsContactsPickerCoreTestCases[run-on-private-profile]
• CtsContactsPickerCoreTestCases[run-on-work-profile]
• CtsContactsPickerCoreTestCasesSdk36
• CtsContactsProviderHostTestCases
• CtsContactsProviderSessionTestCases
• CtsContactsProviderTestsStrictSqlCheckSdk37
• CtsContentPccTestCases
• CtsContentRestrictionTestCases
• CtsContentSafetyServiceTestCases
• CtsContextualModeManagerTestCases
• CtsContextualModeManagerTestCases[run-on-clone-profile]
• CtsContextualModeManagerTestCases[run-on-private-profile]
• CtsContextualModeManagerTestCases[run-on-secondary-user]
• CtsContextualModeManagerTestCases[run-on-work-profile]
• CtsCoreGraphicsAtomHostTestCases
• CtsCoreGraphicsAtomHostTestCases[instant]
• CtsCpuAtomHostTestCases
• CtsCpuAtomHostTestCases[instant]
• CtsCredentialsAtomHostTestCases
• CtsCredentialsAtomHostTestCases[instant]
• CtsDevicePowerAtomHostTestCases
• CtsDevicePowerAtomHostTestCases[instant]
• CtsDeviceStateAtomHostTestCases
• CtsDeviceStateAtomHostTestCases[instant]
• CtsDisplayAtomHostTestCases
• CtsDisplayAtomHostTestCases[instant]
• CtsDisplayStaticDeviceStateTestCases
• CtsDisplayStaticDeviceStateTestCases[instant]
• CtsGameManagerAtomHostTestCases
• CtsGameManagerAtomHostTestCases[instant]
• CtsGnssAtomHostTestCases
• CtsGnssAtomHostTestCases[instant]
• CtsGpuTestCases
• CtsGpuTestCases[instant]
• CtsHardwareHealthAtomHostTestCases
• CtsHardwareHealthAtomHostTestCases[instant]
• CtsJobSchedulerAtomHostTestCases
• CtsJobSchedulerAtomHostTestCases[instant]
• CtsLogcatHostTestCases
• CtsMediaAtomHostTestCases
• CtsMediaAtomHostTestCases[instant]
• CtsMediaRouterHostTestCases
• CtsMediaRouterHostTestCases[instant]
• CtsMemoryAtomHostTestCases
• CtsMemoryAtomHostTestCases[instant]
• CtsMemorySafetyAtomHostTestCases
• CtsMemorySafetyAtomHostTestCases[instant]
• CtsMotionCuesTestCases
• CtsMotionCuesTestCases[instant]
• CtsMultisensoryTestCases
• CtsMultisensoryTestCases[instant]
• CtsMultisensoryTestCases[run-on-clone-profile]
• CtsMultisensoryTestCases[run-on-private-profile]
• CtsMultisensoryTestCases[run-on-secondary-user]
• CtsMultisensoryTestCases[run-on-work-profile]
• CtsNativeNdkAllowlistTest
• CtsNativeServiceTest
• CtsNetAtomHostTestCases
• CtsNetAtomHostTestCases[instant]
• CtsNetSecConfigCustomTrustManagerTestCases
• CtsNetSecConfigCustomTrustManagerTestCases[instant]
• CtsNetSecConfigEncryptedClientHelloTestCases
• CtsNetSecConfigEncryptedClientHelloTestCases[instant]
• CtsNetSecEncryptedClientHelloTestCases
• CtsNetSecEncryptedClientHelloTestCases[instant]
• CtsNetTestCasesLocalNetNoPermissions
• CtsNetTestCasesLocalNetNoPermissions[instant]
• CtsNotificationAtomHostTestCases
• CtsNotificationAtomHostTestCases[instant]
• CtsNpuManagerMoblyTestCases
• CtsNpuManagerTestCases
• CtsPackageManagerIsolatedSplitHostTestCases
• CtsPackageManagerSplitHostTestCases
• CtsPccFeatureTests
• CtsPccFeatureTests[run-on-clone-profile]
• CtsPccFeatureTests[run-on-private-profile]
• CtsPccFeatureTests[run-on-secondary-user]
• CtsPccFeatureTests[run-on-work-profile]
• CtsPccProcessTests
• CtsPccSandboxManagerNativeTest
• CtsPccSecurityTestCases
• CtsPerfAtomHostTestCases
• CtsPerfAtomHostTestCases[instant]
• CtsPerfettoAtomHostTestCases
• CtsPerfettoAtomHostTestCases[instant]
• CtsPerformanceHintManagerAtomHostTestCases
• CtsPerformanceHintManagerAtomHostTestCases[instant]
• CtsPermissionStateAtomHostTestCases
• CtsPermissionStateAtomHostTestCases[instant]
• CtsPersonalContextTestCases
• CtsPersonalContextTestCases[run-on-clone-profile]
• CtsPersonalContextTestCases[run-on-private-profile]
• CtsPersonalContextTestCases[run-on-secondary-user]
• CtsPersonalContextTestCases[run-on-work-profile]
• CtsPowerAtomHostTestCases
• CtsPowerAtomHostTestCases[instant]
• CtsPowerManagerAtomHostTestCases
• CtsPowerManagerAtomHostTestCases[instant]
• CtsPowerManagerPccTestCases
• CtsPowerManagerPccTestCases[instant]
• CtsPowerManagerPccTestCases[run-on-work-profile]
• CtsSerialTestCases
• CtsSettingsStatsAtomHostTestCases
• CtsSettingsStatsAtomHostTestCases[instant]
• CtsSharesheetAppLockTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases[instant]
• CtsSoundTriggerPccTestCases
• CtsStatsdAtomHostRebootTestCases
• CtsStatsdAtomHostRebootTestCases[instant]
• CtsStopAndKillHostTest
• CtsTelecomModuleTests
• CtsTelephonyAtomHostTestCases
• CtsTelephonyAtomHostTestCases[instant]
• CtsTelephonySatelliteTestCases
• CtsTextClassifierPccTestCases
• CtsTlsAtomHostTestCases
• CtsTlsAtomHostTestCases[instant]
• CtsTrustTokenServiceTestCases
• CtsTrustTokenServiceTestCases[instant]
• CtsUprobeStatsTest
• CtsUsageEventsPccTestCases
• CtsUsbAtomHostTestCases
• CtsUsbAtomHostTestCases[instant]
• CtsUsbManagerTestCases[run-on-clone-profile]
• CtsUsbManagerTestCases[run-on-private-profile]
• CtsUsbManagerTestCases[run-on-secondary-user]
• CtsUsbManagerTestCases[run-on-work-profile]
• CtsUsersAtomHostTestCases
• CtsUsersAtomHostTestCases[instant]
• CtsVibratorAtomHostTestCases
• CtsVibratorAtomHostTestCases[instant]
• CtsVirtualDevicesComputerControlTests
• CtsVoiceInteractionAtomHostTestCases
• CtsVoiceInteractionAtomHostTestCases[instant]
• CtsWifiAtomHostTestCases
• CtsWifiAtomHostTestCases[instant]
• CtsWindowManagerHostTestCases
• MctsVideoTestCases
• MtsWebAppTestCases
• PccServiceNonPccClientTest
• PccServicePccClientTest
• VmMultiTenancyTests.CTS

16 удаленных модулей

• AdsPersonalizationStatusTest
• CtsAppFgsTestCases[instant]
• CtsCameraHeadlessSystemUserTestCases
• CtsCarBuiltinApiHostTestCases
• CtsFgsTimeoutTestCases[instant]
• CtsHealthConnectHostSideDeviceTestCases
• CtsHealthConnectHostTestCases
• CtsInstalledLoadingProgressHostTests
• CtsSandboxedAdIdManagerTests
• CtsSandboxedAppSetIdManagerTests
• CtsSandboxedFledgeManagerTests
• CtsSandboxedMeasurementManagerTests
• CtsSandboxedTopicsManagerTests
• CtsShortFgsTestCases[instant]
• CtsVideoEncodingQualityHostTestCases[instant]
• MctsTextClassifierTestCases

CTS Verifier: 17 новых тестов

Добавлено 36 новых тестовых случаев CTS-V-HOST, включая интерактивные тесты и тестовые случаи Verifier на основе хоста .

Добавлено 36 тестов из 7 модулей.

Название модуля	Список недавно добавленных тестовых случаев	Идентификатор требования или API
CtsNotificationSizeVerifierHostTest	android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeDisabled	Тестирование поведения API
CtsPermissionInteractiveTestCases	android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonColorCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonSupportsRtlLayout android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonPaddingCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonIconOnly android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeMorphsOnPress android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeCustomization	CDD 3.8.18[C-0-1]
CtsSysuiInteractiveTestCases	android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_alreadyShowing android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_multipleCallsInShortTime	android.app.StatusBarManager#showPowerMenu
CtsUsbTypecTestCases	com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Cdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Dcp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Sdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testPowerProfileSourceFixed	CDD 7.7.1-[C-SR-3]
CtsTelecomTest	CtsTelecomTest#test_call_audio_for_voice_and_voip_calls CtsTelecomTest#test_incall_ui_shows_when_screen_locked	Перенос существующих тестов телекоммуникаций.
CtsWifiConnectionTests	NetworkRequestTests#test_with_a_specific_ssid_and_bssid NetworkRequestTests#test_with_invalid_credential_in_network_specifier NetworkRequestTests#test_with_pattern_network_specifier NetworkRequestTests#test_with_unavailable_network_specifier NetworkSuggestionTests#test_that_suggestion_modification_in_place NetworkSuggestionTests#test_with_connection_failure NetworkSuggestionTests#test_with_ssid_and_bssid_specified NetworkSuggestionTests#test_with_ssid_and_post_connect_broadcast NetworkSuggestionTests#test_with_ssid_specified	java.lang.String android.net.MacAddress android.net.NetworkSpecifier android.net.NetworkRequest,android.net.ConnectivityManager.NetworkCallback,int android.os.PatternMatcher java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionUserApprovalStatusListener android.net.wifi.WifiManager.SuggestionConnectionStatusListener java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionConnectionStatusListener
CtsWifiUsdTests	WifiUsdTest#test_active_subscriber_exchange WifiUsdTest#test_bidirectional_large_message_exchange WifiUsdTest#test_bidirectional_message_exchange WifiUsdTest#test_passive_subscriber_exchange	android.net.wifi.usd.PublishSessionCallback android.net.wifi.usd.SubscribeSessionCallback android.net.wifi.usd.DiscoveryResult

Добавлено 10 новых тестов для пяти других разделов верификатора.

Раздел	Список недавно добавленных тестовых случаев
AUDIO	Тест задержки аудиосвязи Тестирование многоканального аудиотракта USB Тест разгрузки Audio MMAP PCM Тест параметров воспроизведения звука Тестирование аудионагрузки
CAMERA	Тест сочетания функций камеры ITS
FEATURES	Тест с помощью пипетки
MEDIA	Тест безопасного воспроизведения
SYSUI	Тест слоя закрепленного окна Тест на выполнение самоперемещаемых задач