測試設定

測試套件

如要讓測試成為 VTS 的一部分,測試必須在 Android.bp 中具備下列設定。

test_suites: ["vts"],

此外,將測試新增至套件 general-tests 後,測試就能成為預先提交檢查所用測試對應套件的一部分。

測試設定

在大多數情況下,測試設定 (Trade Federation 用於執行 VTS 測試的 XML 檔案) 會在建構期間自動產生。不過,您可以自訂測試設定。

建立自訂測試設定檔

從頭建立新的測試 XML 檔案可能很複雜,因為這需要瞭解測試架構的運作方式,以及每個測試執行器之間的差異。自動產生的測試設定檔可簡化這項程序。

如要自訂測試 XML 檔案,可以從自動產生的檔案著手。

如要找出自動產生的測試設定檔,請先執行 make 指令來建構設定,如下所示。

$ m VtsHalUsbV1_1TargetTest

在建構輸出目錄中,您可以根據模組名稱搜尋設定檔,如下所示。

$ find out/ -name VtsHalUsbV1_1TargetTest.config

檔案可以有多個副本,且您可以使用任何一個副本。 將 .config 檔案複製到 Android.bp 檔案所在的目錄。

如果 Android.bp 檔案中只有一個測試模組,您可以將 XML 檔案重新命名為 AndroidTest.xml,建構系統就會自動將其做為測試模組的設定檔。否則,請將 test_config 屬性新增至模組,如下方範例所示。

test_config: "VtsHalUsbV1_1TargetTest.xml",

現在您有測試設定檔可供使用,並實作自訂項目。

使用 adb root 強制執行測試

大多數 VTS 測試都需要根層級權限才能執行。如果測試設定檔是自動產生,您可以在 Android.bp 中新增下列屬性。

require_root: true,

如果自訂測試設定檔,請在測試 XML 檔案中新增下列內容。

<target_preparer class="com.android.tradefed.targetprep.RootTargetPreparer"/>

在測試期間停止架構

許多 VTS 測試不需要 Android 架構即可執行,而且在架構停止運作時執行測試,可確保測試穩定運作,不會受到裝置不穩定影響。如果測試設定檔是自動產生,您可以在 Android.bp 中新增下列屬性。

disable_framework: true,

如果自訂測試設定檔,請在測試 XML 檔案中新增下列內容。

<target_preparer class="com.android.tradefed.targetprep.StopServicesSetup"/>

新增其他測試引數

部分 gtest 測試可能需要較長時間才能執行。在這種情況下,您可以在 XML 檔案中新增測試執行器選項。

舉例來說,下列項目中的 native-test-timeout 設定可讓測試以 3 分鐘的逾時時間執行,而非預設的 1 分鐘。

   <test class="com.android.tradefed.testtype.GTest" >
       <option name="native-test-device-path" value="/data/local/tmp" />
       <option name="module-name" value="VtsHalNfcV1_0TargetTest" />
       <option name="native-test-timeout" value="180000"/>
   </test>

要求最低 API 級別

部分 VTS 測試只能在最低 API 級別的裝置上執行。如果測試設定檔是自動產生,您可以將下列屬性新增至 Android.bp

min_shipping_api_level: 29,

vsr_min_shipping_api_level: 202404,

如果測試設定檔經過自訂,請將下列指令新增至測試 XML 檔案。

   <object type="module_controller" class="com.android.tradefed.testtype.suite.module.ShippingApiLevelModuleController">
       <option name="min-api-level" value="29" />
   </object>

   <object type="module_controller" class="com.android.tradefed.testtype.suite.module.ShippingApiLevelModuleController">
       <option name="vsr-min-api-level" value="202404" />
   </object>

API 級別屬性

Android 12 定義了 ro.board.first_api_levelro.board.api_level 屬性,可顯示這些裝置上供應商映像檔的 API 級別。將這些屬性與 ro.product.first_api_level 結合, 測試套件會為裝置選擇適當的測試案例。

Android 13 定義了 ro.vendor.api_level,系統會使用 ro.product.first_api_levelro.board.first_api_levelro.board.api_level 屬性計算必要的供應商 API 級別,並自動設定該級別。

詳情請參閱「供應商 API 級別」。

ro.board.first_api_level

ro.board.first_api_level 屬性是 API 級別,適用於首次發布的 SoC 供應商映像檔,且該 SoC 符合供應商凍結資格。這項資訊與裝置的啟動 API 級別無關,只取決於定義此值的 SoC 第一個 API 級別。這個值在 SoC 的生命週期內不會變更。

如要設定 ro.board.first_api_level,裝置製造商可以在 device.mk 檔案中定義 BOARD_SHIPPING_API_LEVEL,如以下範例所示:

  # BOARD_SHIPPING_API_LEVEL sets ro.product.first_api_level to indicate
  # the first api level that the device has been commercially launched on.
  BOARD_SHIPPING_API_LEVEL := 23

系統會自動將裝置上的 ro.board.first_api_level 屬性定義為 vendor/build.prop。這項屬性是由供應商 init 程序設定。

ro.board.api_level

ro.board.api_level 屬性是供應商映像檔的目前供應商 API 級別,該映像檔的格式為 YYYYMM,且供應商 API 已凍結。建構系統會自動設定這個值。

ro.vendor.api_level

Android 13 導入了 ro.vendor.api_level 屬性,用於顯示供應商映像檔必須支援的 API 級別。如果存在 ro.board.first_api_level,且 ro.board.api_level 設為早於 ro.product.first_api_level 的 API 級別,則系統會自動將此值設為 ro.product.first_api_levelro.board.api_level。如果版本設為 ro.product.first_api_level 中大於或等於 35 的版本,系統會將版本替換為對應的供應商 API 級別。如要從 SoC 的供應商需求中排除需要升級供應商映像檔的供應商實作測試,請參閱這項屬性。

使用 VTS 進行分片程序

如果是 Android 10 以上版本,您可以在多部裝置上執行分片程序,同時使用 VTS 和 CTS-on-GSI 計畫進行測試,方法如下。

run vts --shard-count <number of devices> -s <device serial> ...

這項指令會將 VTS 計畫分割為分片,並在多部裝置上執行。

run cts-on-gsi --shard-count <number of devices> -s <device serial> -s ...

這項指令會將 CTS-on-GSI 方案分割為分片,並在多部裝置上執行。