AccessibilityService-weditor获取节点元素信息&Assists实现自动化

1. weditor 简介

在使用AccessibilityService开发自动化工具或自动化测试脚本时需要知道控件属性才能自动化逻辑。weditor 是一个用于 Android UI 自动化测试的可视化工具,它提供一个 Web 界面,方便查看 Android 设备 UI 层级、获取控件属性。

2. 安装前的准备

在安装 weditor 之前,需要先安装以下依赖环境:

2.1 安装 Python

weditor 依赖 Python 运行环境,建议使用 Python 3.6 及以上版本。

  • 在 Windows 上,可以从 Python 官网 下载并安装。

  • 在 macOS/Linux 上,可以使用包管理工具安装,如:

    复制代码
    sudo apt install python3  # Ubuntu/Debian
    brew install python3  # macOS

3. 安装 weditor

使用 pip 命令安装 weditor

复制代码
pip install -U weditor

安装完成后,可以通过以下命令检查是否安装成功:

复制代码
weditor --help

如果输出帮助信息,则说明安装成功。

4. 连接 Android 设备

4.1 启用 USB 调试模式

在手机上开启 开发者模式 并启用 USB 调试

4.2 连接设备

通过 USB 连接手机,并运行以下命令查看设备是否被识别:

复制代码
adb devices

如果设备列表中显示了设备编号,则表示连接成功。

5. 启动 weditor

在终端执行以下命令启动 weditor

复制代码
weditor

默认情况下,它会在 localhost:17310 启动一个 Web 服务器。在浏览器中访问:

复制代码
http://localhost:17310

即可打开 weditor 界面,并且显示手机当前的界面即可查看节点元素信息,如下:

6. 使用Assists实现简单自动点击和输入

Assists是一个基于AccessibilityService封装的开发框架,主要是为了简化自动化脚本开发、提供增强能力、提高代码易维护性的一个框架。

6.1集成Assists

项目根目录build.gradle添加

以下是Groovy DSL写法,Kotlin DSL的可GPT问下

复制代码
allprojects {
    repositories {
	//添加jitpack仓库
        maven { url 'https://jitpack.io' }
    }
}

主模块build.gradle添加

复制代码
    dependencies {
        //按需添加
        //基础库(必须)
        implementation "com.github.ven-coder.Assists:assists-base:v3.2.11"
        //屏幕录制相关(可选)
        implementation "com.github.ven-coder.Assists:assists-mp:v3.2.11"
        //opencv相关(可选)
        implementation "com.github.ven-coder.Assists:assists-opcv:v3.2.11"
    }

主模块AndroidManifest.xml中注册服务

xml 复制代码
<?xml version="1.0" encoding="utf-8"?>
<manifest xmlns:android="http://schemas.android.com/apk/res/android"
    xmlns:tools="http://schemas.android.com/tools"
    package="com.ven.assists.simple">

    <application
        android:name="com.ven.assists.simple.App"
        android:allowBackup="true"
        android:icon="@mipmap/ic_launcher"
        android:label="@string/app_name"
        android:requestLegacyExternalStorage="true"
        android:roundIcon="@mipmap/ic_launcher_round"
        android:supportsRtl="true"
        android:theme="@style/AppTheme"
        android:usesCleartextTraffic="true">
        
        <!-- 添加代码 ↓-->
        <service
            android:name="com.ven.assists.service.AssistsService"
            android:enabled="true"
            android:exported="true"
            android:permission="android.permission.BIND_ACCESSIBILITY_SERVICE">
            <!--android:priority="10000" 可提高服务在设置中的权重,排在前面-->
            <intent-filter android:priority="10000">
                <action android:name="android.accessibilityservice.AccessibilityService" />
            </intent-filter>
            <meta-data
                android:name="android.accessibilityservice"
                android:resource="@xml/assists_service" />
        </service>
        <!-- 添加代码 ↑-->
        
    </application>

</manifest>

6.2 实现点击微信搜索并输入搜索内容

6.2.1 获取微信搜索节点元素id

注意: 选中的搜索节点的clickable需要是true才行,代表该节点是可点击的

6.2.2 实现点击

复制代码
class SimpleStep: StepImpl() {
    override fun onImpl(collector: StepCollector) {
        collector.next(stepTag = 1){
            //第1步

            "点击搜索".overlayToast()
            delay(1000)
            AssistsCore.findById("com.tencent.mm:id/jha").firstOrNull()?.click()

            //执行第2步
            return@next Step.get(2, delay = 2000)
        }
    }
}

6.2.3 查找输入框并输入文字

除了可以通过id获取节点,还可以通过节点类型获取

6.2.4 实现输入

复制代码
class SimpleStep: StepImpl() {
    override fun onImpl(collector: StepCollector) {
        collector.next(stepTag = 1){
            //第1步

            "点击搜索".overlayToast()
            delay(1000)
            AssistsCore.findById("com.tencent.mm:id/jha").firstOrNull()?.click()

            //执行第2步
            return@next Step.get(2, delay = 2000)
        }.next(stepTag = 2){
            //第2步

            "输入搜索内容".overlayToast()
            delay(1000)

            AssistsCore.findByTags("android.widget.EditText").firstOrNull()?.setNodeText("自动输入的搜索内容")

            //结束执行
            return@next Step.none
        }
    }
}

最终效果

教程源码:https://github.com/ven-coder/autoci.git

相关推荐
该怎么办呢1 小时前
原生android实现定位java实现
android·java·gitee
Android小码家1 小时前
Live555+Windows+MSys2 编译Androidso库和运行使用(三,实战篇)
android·live555
Tsing7221 小时前
Android vulkan示例
android
每次的天空2 小时前
高性能 Android 自定义 View:数据渲染与事件分发的双重优化
android
KdanMin2 小时前
Android 13组合键截屏功能的彻底移除实战
android
_祝你今天愉快2 小时前
安卓源码学习之【导航方式切换分析及实战】
android·源码
&有梦想的咸鱼&3 小时前
Android Compose 框架物理动画之弹簧动画(Spring、SpringSpec)深入剖析(二十七)
android·java·spring
Wgllss3 小时前
Android Compose轻松绘制地图可视化图表,带点击事件,可扩展二次开发
android·架构·android jetpack
SHUIPING_YANG3 小时前
MySQL 慢查询日志开启与问题排查指南
android·mysql·adb
tracyZhang5 小时前
NativeAllocationRegistry----通过绑定Java对象辅助回收native对象内存的机制
android