【测试人生】LLM赋能游戏自动化测试的一些想法

在三年前笔者撰写的Game-Of-AutoTest专栏当中,聊了很多关于游戏自动化测试的实践思考。不论是对自动化测试在技术层面的认识,还是怎么落地一些技术基建保障游戏自动化测试的可扩展性,在这些专栏里都已经做了深度的科普。近年来,LLM在自然语言处理领域取得了突破性进展,并且随着游戏开发的复杂度不断提升,自动化测试在保障游戏质量方面变得尤为重要。直感来看,LLM作为通用的信息处理转换大脑,必然能为游戏自动化测试技术带来了新的可能性。因此,本文就浅聊一下LLM赋能游戏自动化测试的一些想法。

首先是测试用例自动生成。LLM是具备将自然语言转化成结构化数据的能力的,所以理论可行。如果是已经编写好的游戏测试用例,一般本身已经包含了前置条件、执行步骤和预期结果的字段标注,而LLM需要做的就是怎么把每个字段里的内容和自动化框架预置的行为对应上,然后自动生成一套自动化程序。这样可以降本的原因是,自动化一端只需要实现具体的行为,而这些行为怎么串起来,用LLM结合一套行为树框架,理论上也可以自主生成自动化脚本。

其次是自动化测试脚本的迭代。测试需要执行一系列自然语言描述的行为,最终需要做自然语言描述的判断,那么怎样描述更加精确,其实也可以通过LLM辅助,给出修正建议。在此基础上,如果有一套自动化测试调试模块,就可以清晰了解每时每刻LLM在想什么,从而也可以定向优化LLM的判断。如果要让修正建议效果更好,那么LLM就需要了解更多游戏的上下文,所以如果对应的知识库能力可以和游戏引擎项目能力做一个结合的话,那就有可能达到比较好的效果。

然后是探索测试。主要是两件事情,第一件事情是给定一类游戏探索场景,LLM可以自主Plan出一套测试方案,探索测试过程潜在的崩溃和卡死问题;第二件事情就是给定一个系统模块,让LLM自主探索交互行为,自动生成大量测试用例。如果是出海类游戏,对于翻译交互类问题,LLM也有潜力去做识别,这样就可以极大提升游戏测试的广度和深度。

最后一点是,LLM如果要在游戏自动化领域应用的好,产品层面一是需要有一套类似于IDE/Workbench的东西把各种工具链串起来,二是需要配合一套易上手的教学,这样才能更快速在游戏测试工作中落地。要做这个产品还是需要一定的投入的,但大多数游戏可能研发期或者刚上线就暴毙了,不像Web产品生命周期会更长一点。所以如果要做这个产品的话,一定要抱有持续积累的打算,这样才能保证LLM自动化测试的交付质量。

相关推荐
程序员小远24 分钟前
使用Jmeter进行http接口测试
自动化测试·软件测试·python·测试工具·jmeter·http·接口测试
扫地的小何尚1 小时前
AI创新的火花:NVIDIA DGX Spark开箱与深度解析
大数据·人工智能·spark·llm·gpu·nvidia·dgx
嘀咕博客1 小时前
h5游戏免费下载:太空跑酷
游戏
【云轩】1 小时前
五子棋游戏完整项目文档
游戏
m0_748240251 小时前
C++ 游戏开发示例:简单的贪吃蛇游戏
开发语言·c++·游戏
AI智能架构工坊3 小时前
提升AI虚拟健康系统开发效率:架构师推荐10款低代码开发平台
android·人工智能·低代码·ai
崎岖Qiu3 小时前
【SpringAI篇01】:5分钟教会你使用SpringAI (1.0.0稳定版)
java·spring boot·后端·spring·ai
居7然4 小时前
DeepSeek OCR:重新定义AI文档处理的“降本增效”新范式
人工智能·算法·语言模型·自然语言处理·大模型·ocr
AA陈超4 小时前
虚幻引擎5 GAS开发俯视角RPG游戏 P06-16 属性菜单 - 构建
c++·游戏·ue5·游戏引擎·虚幻
weixin_438077494 小时前
windows10安装WSL2 & ubuntu24.04中安装vLLM & vLLM中部署Qwen2.5-VL
llm·vllm·qwen2.5-vl