4-字节跳动-智能化的精准测试实践-刘杰、王孟飞

SmartEye-智能化精准测试实践—刘杰 王孟⻜⼚商背 景演 化突 破未 来⼚商背 景⼚商单周迭代5000+MR1000+需求快速迭代的业务场景⼚商⽤例-代码覆盖率监测统⼀的度量指标便捷的代码⾛读调试⼯具代码覆盖盲区的⻛险前置⽤例设计与代码逻辑对⻬⼚商演 化⼚商开启覆盖率插桩编译Push安装包到设备执⾏测试⽤例触发数据写⼊设备数据导⼊单机⽣成报告代码覆盖率监测⼊⻔版⼚商2.0:多机增量覆盖率监测数 据 传 输产品拆分数据聚合覆盖率计算仓库源码关联报告存储编译平台上传插桩信息覆盖率插桩产物部署执⾏上报数据新建全量查看全量⿊/⽩名单数据消费新建增量查看增量⿊/⽩名单被插桩模块模块1模块2起⽌区间增量运算数据匹配增量分析代码克隆⼚商3.0:多业务多仓库增量覆盖率监测部署设备/集群⼿⼯操作⾃动化⼯具数据拆分冷启缓存负载均衡调度模块全量解析上报触发数据解析数据仓库实时读写Redis⼀般读写mysql⾼频写⼊KafkaES仓库2仓库…仓库1GitLab/Gerrit权限回收加密Token权限下发权限管控事件监听合码监控产品授权增量监控卡点阻塞多仓库关联需求关联研发流程监测平台新建 监控增量 监测多仓 聚合覆盖 详情数据 看板标记 复查阻塞 配置回归 监测操作交互数据采集数据处理数据消费⼚商3.0:多技术栈增量覆盖率监测基 础 数 据 处 理全量代码覆盖率数据处理增量代码覆盖率数据处理实时代码覆盖率MR 增量分⽀ 增量指定区间 增量回归 测试⾃动化⼯具 全量监测实时 全量⽤例 录制程序调⽤链路分析线上 监测MR变动 耦合链路版本变动 耦合链路仓库 监控代 码 覆 盖 率 数 据 采 集 JSAndroid⾃研插桩SDK监控插件监控仓库关联实时上报GoBOE插桩部署数据上报iOS插桩优化编译加速数据上报仓库关联实时上报Flutter程序运⾏时代码覆盖率数据采集程序编译时插桩现场产物采集PSM关联插桩部署数据上报仓库关联⾃研插桩数据上报仓库关联⼚商3.0:多技术栈覆盖率监测技术栈类型当前能⼒Android主APP√独⽴仓库SDK√外置插件√Flutter插件√iOS主⼯程√⼆进制Pod√GoLangGitLab项⽬√Gerrit项⽬√JavaScriptWeb√FlutterAPP√C++SDK√Python⼯程√⼚商数据能⼒：调⽤链路数据编译依赖获