เอกสารนี้แสดงวิธีการทีละขั้นตอนในการสร้างโมดูลแบบหลายอุปกรณ์และระบุข้อจำกัดปัจจุบัน (หากทราบ)
ตัวอย่าง
เรามีโมดูลแบบหลายอุปกรณ์ที่ใช้ Wi-Fi Aware ของ CTS ซึ่งจะส่งข้อความจากอุปกรณ์เครื่องหนึ่งผ่าน Wi-Fi และตรวจสอบว่าอุปกรณ์อีกเครื่องได้รับข้อความดังกล่าว
ซอร์สของโมดูลอยู่ที่ packages/modules/Wifi/tests/hostsidetests/multidevices/test/aware/
เราได้ใส่คำอธิบายประกอบในตัวอย่างให้มากที่สุดเท่าที่เราคิดว่าจะเป็นประโยชน์
ขั้นตอนที่ 1: สร้างโฟลเดอร์โมดูล
เราขอแนะนำให้สร้างโฟลเดอร์สำหรับโมดูลแบบหลายอุปกรณ์ในโปรเจ็กต์ชุดทดสอบที่โมดูลนั้นสังกัดอยู่ เช่น cts/hostsidetests/multidevices/ เราขอแนะนำให้ทำเช่นนี้เพื่อให้โมดูลแบบหลายอุปกรณ์ทั้งหมดอยู่รวมกันอย่างน้อยในตอนแรก ซึ่งจะช่วยให้ค้นพบตัวอย่างได้ง่ายขึ้น
คุณควรวางไฟล์ทั้งหมดของโมดูลนี้ไว้ในโฟลเดอร์โมดูลของตัวเอง เช่น wifi_aware
ขั้นตอนที่ 2: สร้างการทดสอบ
ส่วนนี้เป็นที่ที่คุณจะติดตั้งใช้งานตรรกะการทดสอบ ซึ่งจะขึ้นอยู่กับสิ่งที่กำลังทดสอบเป็นอย่างมาก
สร้างซอร์สการทดสอบ Mobly เช่น: wifi_aware_test.py
ขั้นตอนที่ 3: สร้างไฟล์บิลด์: Android.bp
เพิ่มไฟล์ Android.bp เช่น packages/modules/Wifi/tests/hostsidetests/multidevices/test/Android.bp กำหนดโมดูล python_test_host ที่คล้ายกับโมดูลต่อไปนี้
python_test_host {
name: "CtsWifiAwareTestCases",
main: "wifi_aware_test.py",
srcs: ["wifi_aware_test.py"],
test_suites: [
"cts",
"general-tests",
],
test_options: {
unit_test: false,
},
data: [
// Package the snippet with the mobly test
":wifi_aware_snippet",
],
}
ระบุข้อมูลโค้ดสำหรับการทดสอบด้วยฟิลด์ข้อมูล ซึ่งจะแพ็กกับไบนารี และ ATest หรือการดำเนินการต่อเนื่องจะค้นหาและติดตั้งข้อมูลโค้ดในการทดสอบได้
ข้อมูลโค้ดที่รวมไว้ของ Mobly มีให้บริการใน Android ที่ external/mobly-bundled-snippets/
ไม่บังคับ: สร้างข้อมูลโค้ดที่กำหนดเอง
โมดูลแบบหลายอุปกรณ์บางโมดูลอาจต้องใช้ข้อมูลโค้ด Mobly ที่กำหนดเอง การทดสอบตัวอย่าง มีข้อมูลโค้ด Wi-Fi Aware ที่ packages/modules/Wifi/tests/hostsidetests/multidevices/com.google.snippet.wifi/aware/WifiAwareSnippet.java ซึ่งสร้างด้วย Mobly Snippet Lib ที่มีให้บริการใน Android ที่: external/mobly-snippet-lib/
คุณควรกำหนดข้อมูลโค้ดด้วยกฎ android_test ใน Android.bp เช่นเดียวกับการทดสอบการทำงานของแอป
android_test {
name: "wifi_aware_snippet",
sdk_version: "current",
srcs: [
"CallbackUtils.java",
"WifiAwareSnippet.java",
],
manifest: "AndroidManifest.xml",
static_libs: [
"androidx.test.runner",
"guava",
"mobly-snippet-lib",
],
}
ขั้นตอนที่ 4: สร้างการกำหนดค่าโมดูล: AndroidTest.xml
เพิ่มไฟล์ AndroidTest.xml เช่น packages/modules/Wifi/tests/hostsidetests/multidevices/test/aware/AndroidTest.xml ในการกำหนดค่าการทดสอบนี้ คุณต้องระบุอุปกรณ์ 2 เครื่องสำหรับการทดสอบ ซึ่งคล้ายกับตัวอย่างต่อไปนี้
<configuration description="Config for CTS Wifi Aware test cases">
<option name="test-suite-tag" value="cts" />
<option name="config-descriptor:metadata" key="component" value="wifi" />
<option name="config-descriptor:metadata" key="parameter" value="not_instant_app" />
<option name="config-descriptor:metadata" key="parameter" value="not_multi_abi" />
<option name="config-descriptor:metadata" key="parameter" value="not_secondary_user" />
<device name="device1">
<!-- For coverage to work, the APK should not be uninstalled until after coverage is pulled.
So it's a lot easier to install APKs outside the python code.
-->
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="test-file-name" value="wifi_aware_snippet.apk" />
</target_preparer>
<target_preparer class="com.android.tradefed.targetprep.RunCommandTargetPreparer">
<option name="run-command" value="input keyevent KEYCODE_WAKEUP" />
<option name="run-command" value="wm dismiss-keyguard" />
</target_preparer>
<target_preparer class="com.android.tradefed.targetprep.PythonVirtualenvPreparer">
<!-- Any python dependencies can be specified and will be installed with pip -->
<option name="dep-module" value="mobly" />
</target_preparer>
</device>
<device name="device2">
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="test-file-name" value="wifi_aware_snippet.apk" />
</target_preparer>
<target_preparer class="com.android.tradefed.targetprep.RunCommandTargetPreparer">
<option name="run-command" value="input keyevent KEYCODE_WAKEUP" />
<option name="run-command" value="wm dismiss-keyguard" />
</target_preparer>
</device>
<test class="com.android.tradefed.testtype.mobly.MoblyBinaryHostTest">
<!-- The mobly-par-file-name should match the module name -->
<option name="mobly-par-file-name" value="CtsWifiAwareTestCases" />
<!-- Timeout limit in milliseconds for all test cases of the python binary -->
<option name="mobly-test-timeout" value="60000" />
</test>
</configuration>
โปรดทราบสิ่งต่อไปนี้
- การทดสอบตัวอย่างนี้มีทรัพยากร Dependency ใน Mobly คุณระบุทรัพยากร Dependency ใดก็ได้สำหรับ
PythonVirtualenvPreparerและระบบจะติดตั้งทรัพยากร Dependency ด้วย pip mobly-par-file-nameสำหรับMoblyBinaryHostTestต้องตรงกับชื่อโมดูลตามที่ระบุไว้ใน Android.bp- โปรดระบุ
mobly-test-timeoutสำหรับการทดสอบ โดยระบุเป็นมิลลิวินาทีและใช้กับการดำเนินการไบนารี Python ทั้งหมด (กรอบการทดสอบทั้งหมดรวมกัน) ซึ่งจำเป็นเพื่อไม่ให้กรอบการทดสอบค้างอยู่ตลอดไปในกรณีที่เกิดปัญหาบางอย่าง - แท็ก
deviceแต่ละแท็กสามารถมีการตั้งค่าที่แตกต่างกันในอุปกรณ์แต่ละเครื่องได้ การกำหนดค่า Mobly จะได้รับการตั้งค่าตามลำดับเดียวกับที่ระบุไว้ใน XML
เกี่ยวกับการติดตั้ง APK ข้อมูลโค้ด
- เราได้อัปเดต POC เริ่มต้นเพื่อติดตั้ง APK ข้อมูลโค้ดผ่าน target_preparer เนื่องจากการพูดคุยกับทีม Coverage โดยการถอนการติดตั้งด้วย Harness แทนที่จะใช้โค้ดทดสอบในไบนารี Python จะช่วยให้มั่นใจได้มากขึ้นในเรื่องเวลาว่าการวัดความครอบคลุมจะไม่ถูกลบเร็วเกินไป
ขั้นตอนที่ 5: เรียกใช้การทดสอบในเครื่อง: atest
ปัจจุบันการทดสอบแบบหลายอุปกรณ์จะทำงานในอุปกรณ์จริงเท่านั้น ก่อนเรียกใช้การทดสอบ ให้ตรวจสอบว่าอุปกรณ์ทดสอบอยู่ในสถานะที่เหมาะสม คำสั่ง adb
devices ควรรายงานรายการอุปกรณ์ที่เชื่อมต่อ หากรายการมีอุปกรณ์ที่ไม่ต้องการใช้ในการทดสอบ ให้ระบุอุปกรณ์สำหรับการทดสอบโดยใช้แฟล็ก -s
สำหรับการทดสอบ Wi-Fi ให้ตรวจสอบว่าได้เปิดใช้ Wi-Fi สำหรับอุปกรณ์แล้ว (หลังจากรีเซ็ตเป็นค่าเริ่มต้น)
คุณสามารถเรียกใช้การทดสอบในเครื่องด้วย atest ได้ดังนี้
$ atest CtsWifiAwareTestCases
คุณควรเห็นจำนวนอุปกรณ์ที่ใช้ในส่วนหัวของสรุปในเอาต์พุต atest เช่น Test executed with 2 device(s)
การแก้ปัญหา
หากการทดสอบล้มเหลวเมื่อเรียกใช้ในเครื่องเนื่องจากสาเหตุต่อไปนี้
ข้อผิดพลาด Virtualenv
java.io.IOException: Cannot run program
"virtualenv": error=2, No such file or directory
โปรดตรวจสอบว่า virtualenv อยู่ใน PATH การเพิ่ม "~/.local/bin" ลงใน PATH ควรแก้ปัญหาได้ หากไม่ได้ติดตั้ง virtualenv ให้ทำตามขั้นตอนที่ https://virtualenv.pypa.io/en/latest/installation.html
Expected to get at least 2 controller objects, got 1
โมดูลการทดสอบมี 2 ประเภท ได้แก่ แบบหลายอุปกรณ์หรือแบบอุปกรณ์เดียว โดยไม่มีโมดูลแบบผสม หากคุณพยายามเรียกใช้โมดูลแบบหลายอุปกรณ์โดยไม่มีอุปกรณ์หลายเครื่อง คุณจะเห็นข้อผิดพลาดต่อไปนี้
Expected to get at least 2 controller objects, got 1
การดำเนินการโมดูลในโหมดแบบหลายอุปกรณ์จะช่วยแก้ปัญหาได้
สำหรับ CTS: คุณสามารถใช้การแบ่งพาร์ติชันเพื่อทริกเกอร์ (เช่น --shard-count 2) หรือ run cts-multidevces