CTS 17 출시 노트

이 페이지에는 CTS 17 R1에 도입된 주요 CTS 변경사항이 포함되어 있습니다.

인프라 개선사항

테스트 결과 집계 및 보고

세분화된 하위 테스트 결과를 지원하도록 CameraITS를 포함한 CTS-V 보고 구조가 리팩터링되었습니다. 이 개선사항을 통해 하위 테스트를 병렬로 실행하여 총 런타임을 줄이고 전체 모듈이 아닌 실패한 하위 테스트를 집중적으로 다시 실행할 수 있습니다.

토큰 샤딩

SIM 카드가 있는 샘플을 인식하지 못하여 테스트가 잘못 실행되는 경우가 있는 enable-token-sharding 기능의 문제가 수정되었습니다.

효율성 개선사항

생체 인식 테스트 최적화

CTS-V의 생체 인식 테스트 모음은 여러 시간 기반 키 테스트를 결합하여 인증 프롬프트 수를 120개에서 72개로 줄입니다.

연결 및 범위 지정 현대화

정확한 유효성 검사를 위해 표준화된 1m 기기 설정이 필요한 수동 Presence test가 완전 자동화된 범위 지정 모듈(Ranging test)로 대체되었습니다.

Wi-Fi 테스트 현대화

Wi-Fi 테스트 모음 업데이트에는 새로운 Unsynchronized Service Discovery (USD) 테스트 도입, 기존 Permission tests를 현대화된 프레임워크로 마이그레이션, 기존 수동 Connection tests 삭제가 포함됩니다.

멀티미디어 및 통신 개선사항

보안 재생 기능을 검증하고 올바른 동영상 표시 및 프레임 속도 일관성 보안 재생 테스트 설정을 보장하기 위해 보안 재생 테스트가 도입되었습니다. 이 테스트는 CTS 인증 도구 테스트이며 주변기기 재생 분석 도구가 필요합니다.

통신 테스트 자동화

수동 통신 테스트가 CTS-V-HOST의 CtsTelecomTests 자동화 모듈로 대체되었습니다.

CTS 모듈

테스트 모듈과 테스트 사례의 개수는 다음과 같습니다.

• 기기 유형에 따라 약 1,244개 모듈
• 단일 ABI의 경우 약 310만 개의 테스트 사례

185개의 새 모듈

• CtsAActivityManagerTest
• CtsAlarmAtomHostTestCases
• CtsAlarmAtomHostTestCases[instant]
• CtsAllowlistTestCases
• CtsAllowlistTestCases[instant]
• CtsAngleEnd2EndTestCases
• CtsAnomalyDetectorTests
• CtsAppcompatStateAtomHostTestCases
• CtsAppcompatStateAtomHostTestCases[instant]
• CtsAppExitAtomHostTestCases
• CtsAppExitAtomHostTestCases[instant]
• CtsAppFunctionNoQueryAllPackagesTestCases
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-clone-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-private-profile]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-secondary-user]
• CtsAppFunctionNoQueryAllPackagesTestCases[run-on-work-profile]
• CtsAppFunctionsAtomHostTestCases
• CtsAppFunctionsAtomHostTestCases[instant]
• CtsAppHibernationAtomHostTestCases
• CtsAppHibernationAtomHostTestCases[instant]
• CtsAppInteractionTestCases
• CtsAppInteractionTestCases[run-on-clone-profile]
• CtsAppInteractionTestCases[run-on-private-profile]
• CtsAppInteractionTestCases[run-on-secondary-user]
• CtsAppInteractionTestCases[run-on-work-profile]
• CtsAppOpsAtomHostTestCases
• CtsAppOpsAtomHostTestCases[instant]
• CtsAppStartAtomHostTestCases
• CtsAppStartAtomHostTestCases[instant]
• CtsBackportedFixesAtomHostTestCases
• CtsBackportedFixesAtomHostTestCases[instant]
• CtsBatteryCycleAtomHostTestCases
• CtsBatteryCycleAtomHostTestCases[instant]
• CtsBatteryStatsAtomHostTestCases
• CtsBatteryStatsAtomHostTestCases[instant]
• CtsBinderStatsAtomHostTestCases
• CtsBinderStatsAtomHostTestCases[instant]
• CtsBluetoothAtomHostTestCases
• CtsBluetoothAtomHostTestCases[instant]
• CtsConscryptTestCases
• CtsContactsPickerCoreTestCases
• CtsContactsPickerCoreTestCases[run-on-clone-profile]
• CtsContactsPickerCoreTestCases[run-on-private-profile]
• CtsContactsPickerCoreTestCases[run-on-work-profile]
• CtsContactsPickerCoreTestCasesSdk36
• CtsContactsProviderHostTestCases
• CtsContactsProviderSessionTestCases
• CtsContactsProviderTestsStrictSqlCheckSdk37
• CtsContentPccTestCases
• CtsContentRestrictionTestCases
• CtsContentSafetyServiceTestCases
• CtsContextualModeManagerTestCases
• CtsContextualModeManagerTestCases[run-on-clone-profile]
• CtsContextualModeManagerTestCases[run-on-private-profile]
• CtsContextualModeManagerTestCases[run-on-secondary-user]
• CtsContextualModeManagerTestCases[run-on-work-profile]
• CtsCoreGraphicsAtomHostTestCases
• CtsCoreGraphicsAtomHostTestCases[instant]
• CtsCpuAtomHostTestCases
• CtsCpuAtomHostTestCases[instant]
• CtsCredentialsAtomHostTestCases
• CtsCredentialsAtomHostTestCases[instant]
• CtsDevicePowerAtomHostTestCases
• CtsDevicePowerAtomHostTestCases[instant]
• CtsDeviceStateAtomHostTestCases
• CtsDeviceStateAtomHostTestCases[instant]
• CtsDisplayAtomHostTestCases
• CtsDisplayAtomHostTestCases[instant]
• CtsDisplayStaticDeviceStateTestCases
• CtsDisplayStaticDeviceStateTestCases[instant]
• CtsGameManagerAtomHostTestCases
• CtsGameManagerAtomHostTestCases[instant]
• CtsGnssAtomHostTestCases
• CtsGnssAtomHostTestCases[instant]
• CtsGpuTestCases
• CtsGpuTestCases[instant]
• CtsHardwareHealthAtomHostTestCases
• CtsHardwareHealthAtomHostTestCases[instant]
• CtsJobSchedulerAtomHostTestCases
• CtsJobSchedulerAtomHostTestCases[instant]
• CtsLogcatHostTestCases
• CtsMediaAtomHostTestCases
• CtsMediaAtomHostTestCases[instant]
• CtsMediaRouterHostTestCases
• CtsMediaRouterHostTestCases[instant]
• CtsMemoryAtomHostTestCases
• CtsMemoryAtomHostTestCases[instant]
• CtsMemorySafetyAtomHostTestCases
• CtsMemorySafetyAtomHostTestCases[instant]
• CtsMotionCuesTestCases
• CtsMotionCuesTestCases[instant]
• CtsMultisensoryTestCases
• CtsMultisensoryTestCases[instant]
• CtsMultisensoryTestCases[run-on-clone-profile]
• CtsMultisensoryTestCases[run-on-private-profile]
• CtsMultisensoryTestCases[run-on-secondary-user]
• CtsMultisensoryTestCases[run-on-work-profile]
• CtsNativeNdkAllowlistTest
• CtsNativeServiceTest
• CtsNetAtomHostTestCases
• CtsNetAtomHostTestCases[instant]
• CtsNetSecConfigCustomTrustManagerTestCases
• CtsNetSecConfigCustomTrustManagerTestCases[instant]
• CtsNetSecConfigEncryptedClientHelloTestCases
• CtsNetSecConfigEncryptedClientHelloTestCases[instant]
• CtsNetSecEncryptedClientHelloTestCases
• CtsNetSecEncryptedClientHelloTestCases[instant]
• CtsNetTestCasesLocalNetNoPermissions
• CtsNetTestCasesLocalNetNoPermissions[instant]
• CtsNotificationAtomHostTestCases
• CtsNotificationAtomHostTestCases[instant]
• CtsNpuManagerMoblyTestCases
• CtsNpuManagerTestCases
• CtsPackageManagerIsolatedSplitHostTestCases
• CtsPackageManagerSplitHostTestCases
• CtsPccFeatureTests
• CtsPccFeatureTests[run-on-clone-profile]
• CtsPccFeatureTests[run-on-private-profile]
• CtsPccFeatureTests[run-on-secondary-user]
• CtsPccFeatureTests[run-on-work-profile]
• CtsPccProcessTests
• CtsPccSandboxManagerNativeTest
• CtsPccSecurityTestCases
• CtsPerfAtomHostTestCases
• CtsPerfAtomHostTestCases[instant]
• CtsPerfettoAtomHostTestCases
• CtsPerfettoAtomHostTestCases[instant]
• CtsPerformanceHintManagerAtomHostTestCases
• CtsPerformanceHintManagerAtomHostTestCases[instant]
• CtsPermissionStateAtomHostTestCases
• CtsPermissionStateAtomHostTestCases[instant]
• CtsPersonalContextTestCases
• CtsPersonalContextTestCases[run-on-clone-profile]
• CtsPersonalContextTestCases[run-on-private-profile]
• CtsPersonalContextTestCases[run-on-secondary-user]
• CtsPersonalContextTestCases[run-on-work-profile]
• CtsPowerAtomHostTestCases
• CtsPowerAtomHostTestCases[instant]
• CtsPowerManagerAtomHostTestCases
• CtsPowerManagerAtomHostTestCases[instant]
• CtsPowerManagerPccTestCases
• CtsPowerManagerPccTestCases[instant]
• CtsPowerManagerPccTestCases[run-on-work-profile]
• CtsSerialTestCases
• CtsSettingsStatsAtomHostTestCases
• CtsSettingsStatsAtomHostTestCases[instant]
• CtsSharesheetAppLockTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases
• CtsSizeCompatRestartButtonAtomHostTestCases[instant]
• CtsSoundTriggerPccTestCases
• CtsStatsdAtomHostRebootTestCases
• CtsStatsdAtomHostRebootTestCases[instant]
• CtsStopAndKillHostTest
• CtsTelecomModuleTests
• CtsTelephonyAtomHostTestCases
• CtsTelephonyAtomHostTestCases[instant]
• CtsTelephonySatelliteTestCases
• CtsTextClassifierPccTestCases
• CtsTlsAtomHostTestCases
• CtsTlsAtomHostTestCases[instant]
• CtsTrustTokenServiceTestCases
• CtsTrustTokenServiceTestCases[instant]
• CtsUprobeStatsTest
• CtsUsageEventsPccTestCases
• CtsUsbAtomHostTestCases
• CtsUsbAtomHostTestCases[instant]
• CtsUsbManagerTestCases[run-on-clone-profile]
• CtsUsbManagerTestCases[run-on-private-profile]
• CtsUsbManagerTestCases[run-on-secondary-user]
• CtsUsbManagerTestCases[run-on-work-profile]
• CtsUsersAtomHostTestCases
• CtsUsersAtomHostTestCases[instant]
• CtsVibratorAtomHostTestCases
• CtsVibratorAtomHostTestCases[instant]
• CtsVirtualDevicesComputerControlTests
• CtsVoiceInteractionAtomHostTestCases
• CtsVoiceInteractionAtomHostTestCases[instant]
• CtsWifiAtomHostTestCases
• CtsWifiAtomHostTestCases[instant]
• CtsWindowManagerHostTestCases
• MctsVideoTestCases
• MtsWebAppTestCases
• PccServiceNonPccClientTest
• PccServicePccClientTest
• VmMultiTenancyTests.CTS

삭제된 모듈 16개

• AdsPersonalizationStatusTest
• CtsAppFgsTestCases[instant]
• CtsCameraHeadlessSystemUserTestCases
• CtsCarBuiltinApiHostTestCases
• CtsFgsTimeoutTestCases[instant]
• CtsHealthConnectHostSideDeviceTestCases
• CtsHealthConnectHostTestCases
• CtsInstalledLoadingProgressHostTests
• CtsSandboxedAdIdManagerTests
• CtsSandboxedAppSetIdManagerTests
• CtsSandboxedFledgeManagerTests
• CtsSandboxedMeasurementManagerTests
• CtsSandboxedTopicsManagerTests
• CtsShortFgsTestCases[instant]
• CtsVideoEncodingQualityHostTestCases[instant]
• MctsTextClassifierTestCases

CTS 인증 도구 17의 새로운 테스트

상호작용 테스트, 호스트 기반 인증 도구 테스트 사례를 비롯한 36개의 새로운 CTS-V-HOST 테스트 사례가 추가되었습니다.

7개 모듈에서 36개의 테스트가 추가됨

모듈 이름	새로 추가된 테스트 사례 목록	요구사항 ID 또는 API
CtsNotificationSizeVerifierHostTest	android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeEnabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testBitmapOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriOverLimit_ChangeDisabled android.app.notificationsizeverifier.cts.NotificationSizeVerifierHostTest#testUriUnderLimit_ChangeDisabled	API 동작 테스트
CtsPermissionInteractiveTestCases	android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonColorCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonSupportsRtlLayout android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonPaddingCustomization android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonIconOnly android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeMorphsOnPress android.permissioninteractive.cts.LocationButtonInteractiveTest#verifyButtonShapeCustomization	CDD 3.8.18[C-0-1]
CtsSysuiInteractiveTestCases	android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_alreadyShowing android.sysui.cts.ShowPowerMenuInteractiveTest#showPowerMenu_multipleCallsInShortTime	android.app.StatusBarManager#showPowerMenu
CtsUsbTypecTestCases	com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Cdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Dcp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testBc12Sdp com.google.cts.interactive.usb.typec.CtsUsbTypecTestCases#testPowerProfileSourceFixed	CDD 7.7.1-[C-SR-3]
CtsTelecomTest	CtsTelecomTest#test_call_audio_for_voice_and_voip_calls CtsTelecomTest#test_incall_ui_shows_when_screen_locked	기존 통신 테스트 마이그레이션
CtsWifiConnectionTests	NetworkRequestTests#test_with_a_specific_ssid_and_bssid NetworkRequestTests#test_with_invalid_credential_in_network_specifier NetworkRequestTests#test_with_pattern_network_specifier NetworkRequestTests#test_with_unavailable_network_specifier NetworkSuggestionTests#test_that_suggestion_modification_in_place NetworkSuggestionTests#test_with_connection_failure NetworkSuggestionTests#test_with_ssid_and_bssid_specified NetworkSuggestionTests#test_with_ssid_and_post_connect_broadcast NetworkSuggestionTests#test_with_ssid_specified	java.lang.String android.net.MacAddress android.net.NetworkSpecifier android.net.NetworkRequest,android.net.ConnectivityManager.NetworkCallback,int android.os.PatternMatcher java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionUserApprovalStatusListener android.net.wifi.WifiManager.SuggestionConnectionStatusListener java.util.concurrent.Executor,android.net.wifi.WifiManager.SuggestionConnectionStatusListener
CtsWifiUsdTests	WifiUsdTest#test_active_subscriber_exchange WifiUsdTest#test_bidirectional_large_message_exchange WifiUsdTest#test_bidirectional_message_exchange WifiUsdTest#test_passive_subscriber_exchange	android.net.wifi.usd.PublishSessionCallback android.net.wifi.usd.SubscribeSessionCallback android.net.wifi.usd.DiscoveryResult

5개의 다른 인증 도구 섹션에 10개의 새로운 테스트가 추가됨

섹션	새로 추가된 테스트 사례 목록
AUDIO	오디오 통신 지연 시간 테스트 오디오 데이터 경로 USB 다중 채널 테스트 오디오 MMAP PCM 오프로드 테스트 오디오 재생 매개변수 테스트 오디오 워크로드 테스트
CAMERA	카메라 ITS 기능 조합 테스트
FEATURES	스포이트 테스트
MEDIA	보안 재생 테스트
SYSUI	고정된 윈도잉 레이어 테스트 자체 이동 가능한 작업 테스트