一种基于大语言模型场景理解的脚本粒度GUI测试迁移方法
申请号:CN202411888636
申请日期:2024-12-13
公开号:CN120086126A
公开日期:2025-06-03
类型:发明专利
摘要
一种基于大语言模型场景理解的脚本粒度GUI测试迁移方法,包括LLM‑Agent场景抽取模块、视觉增强模块、脚本预处理模块和自动化探索模块。视觉增强模块包括提取图片文字信息、识别组件坐标,以降低大模型对图片的理解难度。脚本预处理模块则充分分析脚本的抽象语法结构,并提取场景理解所需的基本信息,如操作目标、操作类别等。LLM‑Agent场景抽取模块则依据预处理后的脚本和截图抽取功能场景,形成对场景的整体理解后自动化探索待测应用生成测试脚本。而自动化探索模块则负责具体设备的操作,以及支持整个框架的自动化运行,包括错误纠偏、终止判断等部分。
技术关键词
迁移方法
大语言模型
生成测试脚本
场景
语法结构
模块
光学字符识别
边缘检测算法
回放设备
图片
视觉
命令
框架
坐标
混合型
文本
组织
线条
嵌套