演讲嘉宾:韩贝

腾讯 专项技术测试高级工程师

腾讯云专项技术测试高级工程师,负责支撑腾讯手机管家、腾讯电脑管家及腾讯云WAF业务,有丰富安全产品领域经验。

在自动化和专项有深度实践,在web自动化、小程序自动化、移动端自动化、后台自动化有完整建设经历,从0到1建设安全各产品各层级自动化,提高测试效率,缩短交付周期。

参入建设腾讯安全产品后台性能、小程序性能、安全防护建设,保证产品性能和能力处于业内领先水平。对大模型在测试领域应用有深入研究,主导完成大模型UI自动化研究及落地。

分享主题:基于LLM的Web UI自动化方案及实践
大模型测试专场

准确性。该框架在腾讯云多产品上得到了成功的应用和实践。Mozi采用多Agent模式,能够连接功能测试用例、大模型和自动化工具,从而实现高效的UI测试。

Mozi利用大模型的多模态能力,让模型根据功能测试用例步骤、封装的自动化工具函数描述以及经过处理的页面截图,生成Mozi可识别执行的伪代码并驱动自动化执行。执行结果页面和用例断言在反馈给大模型,让模型给出用例步骤断言判断,进而实现自动化的UI测试。此外,Mozi还提供了一个谷歌插件,帮助用户快速将历史功能测试用例通过录制方式转换成大模型能够准确识别和执行的用例,通过RAG构建了断言知识库,使大模型能够更好地进行功能测试用例断言优化和实际执行判断。

通过这些手段,Mozi显著提高了大模型在UI自动化测试中的表现,实现通过用例描述驱动UI自动化执行,无需编写代码。对比传统UI自动化,显著降低了写用例的门槛和维护用例的成本,断言更加全面。