《A3--李远康--智解用例・自生脚本・自愈执行:效率与可控的测试新解.pdf》由会员分享,可在线阅读,更多相关《A3--李远康--智解用例・自生脚本・自愈执行:效率与可控的测试新解.pdf(37页珍藏版)》请在三个皮匠报告上搜索。
1、李远康科大讯飞 测试部副总监/测试专家李远康科大讯飞 测试部 副总监/测试专家10 年+软件测试经验,主导教育考试业务、团队管理效能类核心系统质量保障及效能提升,为系统稳定迭代提供关键支撑深耕测试工具研发与自动化体系搭建,主导开发用例管理、监控平台以实现测试数字化与质量预警;精通自动化框架,深入元素定位、动态适配及用例自愈,擅长大模型测试工具“可控性与稳定性平衡”落地,推动团队从“脚本编写”向“用例设计”转型,显著提升质效与核心竞争力目录CONTENTS问题解析:大模型自主测试落地痛点与实践挑战0102技术抉择:从“理想方案”到“落地可行”的权衡工程实践:构建“稳定+高效”的自动化测试体系03
2、收益量化:从“技术创新”到“业务价值”的转化04总结与展望05PART 01问题解析:大模型自主测试落地痛点与实践挑战核心矛盾:“自动化期望”与“不可控/不稳定”的冲突Curosr+Playwright-MCP:执行用例(创建并删除专项训练)“自然语言描述场景,AI自动生成执行脚本”的工具难以常态化落地,核心问题集中在“不可控”与“不稳定”核心逻辑:全流程不确定 无法常态化落地语义理解不确定问题同一用例多次生成步骤逻辑不同影响步骤不确定漏测风险高执行过程不确定问题相同脚本时过时而失败影响难判失败原因,容易误导/漏问题自愈效果不确定问题修复可能越修越错影响全量重验耗时,易出“假阳性”010302
3、结果判定不确定问题误判页面状态(loading 当成功)影响颠覆测试价值,关键业务不敢用04PART 02技术抉择:从“理想方案”到“落地可行”的权衡破局思路:效率与可控性双平衡l 以“效率与可控性双平衡”为破局关键,核心目标聚焦于解决大模型应用中“不可控、不稳定”的核心痛点l 通过明确大模型与工具的职责边界,推动大模型从“不可信”的应用状态转变为“可依赖”的实用工具可控性优先在关键业务节点设置人工干预环节,从流程上杜绝大模型逻辑偏离预设目标的风险,保障应用安全性与准确性解决“不可控、不稳定”痛点,明确大模型与工具的职责边界,实现从“不可信”到“可依赖”提效率不妥协依托“大模型+工具”的分工协
4、作模式,让大模型负责创造性、灵活性任务,工具承担标准化、重复性工作,兼顾可靠性与实用性可控核心目标效率核心策略解决大模型自主测试落地难的关键,在于平衡效率与可控性,同时应对脚本易失效问题人工确认锚点的思考将流程拆分为“用例分析步骤生成人工确认脚本生成执行验证”,仅在步骤生成环节人工干预(专业判断和经验),确保逻辑与业务预期一致步骤生成人工介入,对齐业务预期找到对结果影响最关键、最能决定后续流程走向的节点,而非盲目追求“往前移”,这样才能更高效地控制不确定性,让流程更贴合业务预期脚本自动生成的思考执行流程遵循“单步生成步骤脚本即时执行验证验证成功则保存当前步骤脚本自动循环进入下一步骤生成”的逻辑
5、通过自动化手段减少手工编写、反复调试的工作量,将人力从机械性编写任务中释放,显著提升用例脚本的整体编写效率告别手工编写,自动生成用例脚本Playwright-MCP 在执行环节的自动生成脚本能力启发我们:将这种自动生成思路延伸到执行步骤的场景,让流程化、重复性的执行步骤也能通过自动化生成脚本完成用例执行自愈的思考痛点驱动的必然探索技术闭环的逻辑延伸对测试本质的重新诠释核心痛点凸显:自动化测试中,脚本维护耗时、执行失败后人工介入繁琐是长期难题技术启发延伸:脚本从手工到自动生成实现“生产端”突破,自然思考执行失败用例能否自动修复生成全流程效能追求:旨在让测试从“半自动化”迈向“全链路自动化+自愈式
6、运行”,提升整体效率与自主性生产到迭代的延伸:脚本自动生成完成“从无到有”,自愈执行实现“从有到优/从失效到有效”的迭代闭环体系的构建:形成“生成执行自愈再执行”的自动化闭环,推动测试技术体系化发展全生命周期覆盖:让自动化覆盖测试全流程,而非仅单个环节,是技术理念的落地升级从被动到主动:传统测试执行被动依赖预设脚本,自愈执行让测试具备主动适应变化、自我修正的能力协同进化的理念:被测系统动态变化,测试从“静态匹配”转向“动态适配”,与系统协同进化轻量自主的目标:减少人工维护负担,使自动化测试更轻量、自主,高效助力软件迭代自愈执行:破解自动化测试痛点,推动技术与测试进化PART 03工程实践:构建