【测试之美】 网易有道 质量保障体系 - 主题沙龙

由【有道测试团队】与 TesterHome 社区联合主办的【网易有道 - 质量保障体系】主题技术沙龙，邀约大家共探：网易有道质量保障的支撑体系，精彩分享，不容错过。

团队介绍：

网易有道以帮助用户实现 “高效学习” 为使命，依托强大的 Al 技术，围绕学习场景打造了一系列深受用户喜爱的学习产品和服务。
网易有道测试团队一直致力于探索高质量、高效率的服务保障体系，并从用户角度不断探索 AI 算法的质量评估体系。

活动出品人：

张晓璐
网易有道人工智能产品部测试开发专家
负责有道 AI 评测工作，热爱探索 AI 算法和产品的评测体系建设。

活动地点：

北京市海淀区西北旺东路 10 号院中关村软件园二期西区 7 号 网易研发中心 C1M6

日程安排 2023.8.20

议题名称：有道业务监控系统的演变

讲师介绍：

田霄 毕业于中南大学，

10 年的测试开发经验，对自动化测试领域有浓厚的兴趣，目前负责有道测试工具平台的建设与推进工作。

汪梅 资深测试开发工程师，

任职网易有道广告部测试负责人，喜欢研究持续集成和持续测试、线下线上质量可见性、测试平台设计开发等。

议题介绍：

监控是业务线上质量保障中的重要一环，具有发现问题、辅助排查问题的重要作用，充当着 “保镖” 的角色。

希望借助分享，可以把有道在业务监控系统搭建方面演变的过程、过程中遇到的问题以及有效的实践方案等总结分享给大家。

议题名称：词典笔 OCR 的质量保障探索及实战

讲师介绍：

王丹 有道词典笔和 AI 学习机 AI 质量评测项目负责人。

8 年 AI 领域工作经验，7 年项目管理经验。擅长从用户角度设计评测方案和评测指标，通过流程、自动化、sop 保证产品质量和降本增效

议题简介：

随着越来越多公司进军词典笔领域，OCR 是词典笔的核心算法之一，其质量直接影响产品口碑和用户体验。作为词典笔领域行业第一的网易有道词典笔算法质量评测负责人，探索出了一套成熟且客观的评测体系，为词典笔以及其他算法质量保障同学提供了优秀的实践经验。本次分享将介绍我们目前总结出来的评测认知，帮助大家少走弯路。也希望能够抛转引玉，和大家共创 AI 算法质量的评测标准。

议题名称：有道口语打分（CAPT）算法评测

讲师介绍：

周寒聿西 网易有道测试开发工程师，负责有道语音相关业务测试

议题简介：

口语打分（CAPT）算法质量测试方法探索
1.介绍口语打分评测面临的困难：标注主观、评测方面多、指标不反映问题
2.介绍数据标注的挑战：音素颗粒度、主观与客观的平衡、定性的原则
3.分享新指标的探索尝试：将准召率指标修改应用于连续数值任务
4.多样灵活的测试方法尝试：专项测试、验证性测试、人工评估

议题名称：有道 TTS 评测体系介绍

讲师介绍：

龚思思 网易有道测试开发工程师，

先后负责自然语言处理、语音合成、计算机视觉等方向的质量保障，目前是计算机视觉业务测试负责人。

议题简介：

介绍有道 TTS 评测体系，包括如何多维度设计适合业务的评测指标和评测方法以及如何高效建设评测数据，来推动业务不断优化，保障产品质量。

沙龙定位

• 专注测试技术以及质量方面的的分享会，质量朋友集会。

沙龙宗旨 

• 秉承着高质量、有深度、能落地、重分享的原则与广大测试工程师进行分享与交流，推广新鲜实用的测试技术以及积极正确的测试理念

致谢

• 感谢社区北京的志愿者同学，一直以来还在默默支持！我们还是会继续把这些公益沙龙继续坚持下去。

• 感谢有道测试团队对技术活动的支持