android 无障碍服务本意是为了帮助盲人操作手机而设计,但是现在也有人利用这个做自动化操作。
本片文章讲述的主要用作自动化方面。
官方文档
关于配置方法和接口列表,参考 无障碍
比较常用的接口:
-
执行点击操作
-
触摸屏幕,滑动
-
设置文本
-
返回
-
根据文本或ID查找控件
-
获取当前前台应用包名
-
支持显示悬浮窗
遇到的问题
如何获取当前应用包名
这个比较简单,可以直接从当前激活的window中获取
Kotlin
service.rootInActiveWindow?.packageName
如何获取当前activity名
理论上来说 这个没有100%可靠的方法,只能提升准确率,需要自己去加一些判断条件,如非全屏的事件忽略,不要修改当前前台activity。
只能从Event获取,没法从Window中获取。
Kotlin
event.className
为什么有的EditText粘贴不进去?
使用根据分析界面元素,确保自己找到的是EditText。
有些界面你咋一看是EditText, 实际上是TextView, 而真正的EditText也存在,但被隐藏起来了。
为什么有的元素明明手可以点击但是clickable 是false, 执行perfrom click 失败。
有些人元素为了防止程序自动关闭,把clickable设置为了false.可以用模拟手动点击的方式来点击。
或者往上搜索父节点,找到第一个可点击的父节点,再点击。
Kotlin
/**
* 查找第一个可点击的父元素
*/
fun AccessibilityNodeInfo.findFirstParentClickable(): AccessibilityNodeInfo? {
arrayOfNulls<AccessibilityNodeInfo>(1).apply {
findFirstParentClickable(this)
return this[0]
}
}
/**
* 查找可点击的父元素
*/
private fun AccessibilityNodeInfo.findFirstParentClickable(nodeInfo: Array<AccessibilityNodeInfo?>) {
if (parent.isClickable) {
nodeInfo[0] = parent
return
} else {
parent.findFirstParentClickable(nodeInfo)
}
}
为什么程序执行了一段时间后收不到无障碍的Event了?
八成是程序出问题了:要么程序崩溃了,要么程序处于卡死状态。当前可能也有些手机有兼容性问题,我目前主要测试机型为小米,还没遇到该问题,可稳定运行几十天。。。
总结
无障碍服务用来做简单的自动化操作还行,一旦流程多了,写起来就很复杂(流程多)且有很多界面异常需要处理。
我觉得做整个app无障碍时最难处理的是
当前顶层Activity是什么?
如何识别到当前有一个对话框在前面?
这两个都只能根据Event获得,目前还没有非常靠谱的判断方法。