三種方式自動(dòng)化控制APP
自動(dòng)化控制APP不管是在工作還是生活方面，都可以幫助我們高效地完成任務(wù)，節(jié)省時(shí)間和精力。本文主要介紹自動(dòng)化控制APP的3種常用方式。
一、Python + adb
這種方式需要對(duì)Android有一些基本的了解。adb是一種用于調(diào)試Android應(yīng)用程序的工具。使用Python和adb可以輕松實(shí)現(xiàn)自動(dòng)化控制移動(dòng)端APP。
1.特點(diǎn)
這種方式最簡單，但是控制效果也最粗糙。不同的手機(jī)對(duì)應(yīng)的元素x,y軸的位置不同，所以不適合操作不同尺寸的所有手機(jī)。這種方式也只適合于開發(fā)者，對(duì)于普通用戶使用成本過高。
2.使用步驟
(1) 安裝Android SDK
具體細(xì)節(jié)略過，自行g(shù)oogle安裝。安裝完畢后，配置好ANDROID_HOME環(huán)境變量。
(2) 安裝Python
具體細(xì)節(jié)略過，自行g(shù)oogle安裝。
(3) 打開手機(jī)的開發(fā)者模式
同時(shí)開啟USB調(diào)試和顯示指針位置。
(4) 此時(shí)操作手機(jī)
可以看到有2根軸，同時(shí)最上方會(huì)顯示頁面焦點(diǎn)元素的x,y軸位置。
(5) 使用Python代碼+adb簡單控制APP
import time
import subprocess
# 點(diǎn)擊某個(gè)位置
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 564 1861")
time.sleep(2)
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 188 980")
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 869 1808")
time.sleep(4)
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 320 965")
# 輸入數(shù)據(jù)
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input text 15850501595")
# 按返回鍵
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input keyevent KEYCODE_BACK")
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 512 1120")
# 輸入數(shù)據(jù)
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input text 15850501595")
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input keyevent KEYCODE_BACK")
subprocess.getoutput(f"adb -s Y2J7N17C27000069 shell input tap 843 1824")(6) adb常用命令
- 查看手機(jī)設(shè)備：adb devices
- 查看設(shè)備型號(hào)：adb shell getprop ro.product.model
- 查看電池信息：adb shell dumpsys battery
- 查看設(shè)備ID：adb shell settings get secure android_id
- 查看設(shè)備IMEI：adb shell dumpsys iphonesubinfo
- 查看Android版本：adb shell getprop ro.build.version.release
- 查看手機(jī)網(wǎng)絡(luò)信息：adb shell ifconfig
- 查看設(shè)備日志：adb logcat
- 重啟手機(jī)設(shè)備：adb reboot
- 安裝一個(gè)apk：adb install /path/demo.apk
- 卸載一個(gè)apk：adb uninstall <package>
- 查看系統(tǒng)運(yùn)行進(jìn)程：adb shell ps
- 查看系統(tǒng)磁盤情況：adb shell ls /path/
- 手機(jī)設(shè)備截屏：adb shell screencap -p /sdcard/aa.png
- 手機(jī)文件下載到電腦：adb pull /sdcard/aa.png ./
- 電腦文件上傳到手機(jī)：adb push aa.png /data/local/
- 手機(jī)設(shè)備錄像：adb shell screenrecord /sdcard/ab.mp4
- 手機(jī)屏幕分辨率：adb shell wm size
- 手機(jī)屏幕密度：adb shell wm density
- 手機(jī)屏幕點(diǎn)擊：adb -s xxxxxxxxxxxxxxxxxxxxxxxxx shell input tap xvalue yvalue
- 手機(jī)屏幕滑動(dòng)：adb shell input swipe 1000 1500 200 200
- 手機(jī)屏幕帶時(shí)間滑動(dòng)：adb shell input swipe 1000 1500 0 0 1000
- 手機(jī)文本輸入：adb shell input text xxxxx
- 手機(jī)鍵盤事件：adb shell input keyevent xxxx二、Android無障礙
這種方式是使用Android無障礙功能實(shí)現(xiàn)自動(dòng)控制APP的效果。需要開啟Android無障礙功能，然后編寫Android代碼來控制另外的APP應(yīng)用。
1.特點(diǎn)
這種方式需要開發(fā)者對(duì)Android有一些開發(fā)經(jīng)驗(yàn)。優(yōu)點(diǎn)是：可以用Android開發(fā)出獨(dú)立的apk安裝包，安裝到普通用戶手機(jī)里，方便用戶使用。
2.使用步驟
(1) 安裝Android SDK、安裝Android Studio
具體細(xì)節(jié)略過，自行g(shù)oogle安裝。安裝完畢后，配置好ANDROID_HOME環(huán)境變量。
(2) 使用Android自帶的tool工具
Android在level-21和之前的低版本，安裝完畢后有一個(gè)tool工具包，但是高版本移除了此工具包。所以在安裝SDK時(shí)還需要加上level-21版本。
使用Android自帶的tool工具，主要是為了查看APP的頁面布局和元素。但是monitor已經(jīng)不可用了，只能使用uiAutormatorViewer。
(3) 利用uiAutormatorViewer工具找到元素信息
用uiAutormatorViewer查看頁面元素所在的x,y軸的布局。然后編寫Android代碼控制點(diǎn)擊等效果。此工具顯示出來的界面如下：
(4) 代碼示例
在AndroidManifest.xml代碼里配置無障礙service，然后實(shí)現(xiàn)AccessibilityService類，實(shí)現(xiàn)onAccessibilityEvent方法。后續(xù)手機(jī)界面如果有變動(dòng)，內(nèi)部會(huì)自動(dòng)觸發(fā)調(diào)用onAccessibilityEvent方法。
public class XXXXXAccessibilityService extends AccessibilityService {
@Override
public void onInterrupt() {
}
@Override
public void onAccessibilityEvent(AccessibilityEvent event) {
Log.e("無障礙", "來了");
// 創(chuàng)建線程去執(zhí)行任務(wù)
new Thread(new Runnable() {
@Override
public void run() {
// 后續(xù)代碼
}
}).start();
}
}無障礙功能本身也提供了多種尋找頁面元素的方法，比如：
/**
* 根據(jù)ID找元素
*/
private AccessibilityNodeInfo findNodeById(String id) {
AccessibilityNodeInfo root = getRootInActiveWindow();
if (root == null) {
return null;
}
List<AccessibilityNodeInfo> nodeList = root.findAccessibilityNodeInfosByViewId(id);
if (nodeList != null) {
for (int i = 0; i < nodeList.size(); i++) {
AccessibilityNodeInfo node = nodeList.get(i);
if (node != null) {
return node;
}
}
}
return null三、Python + Appium
Python加Appium可以組合成為一種自動(dòng)化測試工具，可以用于測試和自動(dòng)化控制移動(dòng)端APP。
1.特點(diǎn)
這種方式可以自動(dòng)化操作APP，但是使用者基本是開發(fā)者，普通用戶很難完成這一系列的操作。但是也有個(gè)優(yōu)點(diǎn)，有些頁面標(biāo)記為不可點(diǎn)擊的元素，通過這種方式是可以點(diǎn)擊的。
Appium提供了更多的尋找頁面元素的方式，比如uiautomator、xpath、id等。
2.使用步驟
(1) 安裝Python
此處略過步驟，自行g(shù)oogle。
(2) 安裝Appium
老版本的Appium直接包含了Appium server 和 Appium inspector，新版本的Appium安裝完畢后，需要在單獨(dú)安裝Appium inspector。通過Appium inspector可以查看手機(jī)當(dāng)前頁面的xml布局。
# 安裝appium
npm i --location=global appium
# 安裝自動(dòng)查看UI頁面的驅(qū)動(dòng)
appium uiautomator2driver
# 安裝inspector
下載安裝地址：https://github.com/appium/appium-inspector?tab=readme-ov-file
# 啟動(dòng)server
appium server --use-driver=uiautomator2
# 安裝客戶端，代碼里會(huì)使用 appium-python-client 與server通信，
# 然后server在將指令下發(fā)到手機(jī)里的appium端
pip3 install appium-python-client(3) 使用過程
安裝完畢后，就可以通過Python代碼控制App了。
- 啟動(dòng)Appium-server，appium uiautomator2driver。
- 啟動(dòng)Appium inspector，配置好手機(jī)，然后點(diǎn)擊start session，界面如下：
- 通過Appium inspector查看頁面布局和元素，找出目標(biāo)元素。
- 編寫代碼：
device_app_info = AppiumOptions()
# 操作系統(tǒng)
device_app_info.set_capability('platformName', 'Android')
# 操作系統(tǒng)版本
# device_app_info.set_capability('platformVersion', '10')
device_app_info.set_capability('platformVersion', '9')
# 設(shè)備名稱
# device_app_info.set_capability('deviceName', '46F4C19402000952')
device_app_info.set_capability('deviceName', 'Y2J7N17C27000069')
# app package
device_app_info.set_capability('appPackage', 'cn.damai')
# app activity name
device_app_info.set_capability('appActivity', '.launcher.splash.SplashMainActivity')
# 使用uiautomator2驅(qū)動(dòng)
device_app_info.set_capability('automationName', 'UiAutomator2')
# 連接appium server，server地址查看appium啟動(dòng)信息
driver = webdriver.Remote('http://127.0.0.1:4723', options=device_app_info)
# 找到元素，控制元素
buy_btn = driver.find_element(AppiumBy.ANDROID_UIAUTOMATOR, 'new UiSelector().resourceId("cn.damai:id/trade_project_detail_purchase_status_bar_container_fl")')
if buy_btn:
buy_btn.click()四、總結(jié)
以上3種方式都可以用于自動(dòng)化控制移動(dòng)端APP，但是又各有適用的場景。讀者需根據(jù)實(shí)際情況選擇其中的一種方式來實(shí)現(xiàn)自動(dòng)化控制。
以上的方式也可以認(rèn)為是一種爬蟲。還有一些自動(dòng)化的方式是：先分析api請(qǐng)求，然后逆向分析js或者逆向分析apk包，破解其中的加密方式。然后直接調(diào)用api，這種方式后面單獨(dú)講解。
