7月19日,阿里巴巴B2B业务高级技术专家傲野,在【R&D summit】中国软件研发高峰论坛发表《传统软件测试的互联网化改造》主题演讲,从“互联网软件测试跟传统测试的区别”、“互联网化测试团队定位和价值”、“如何打造一支精英化测试团队”这三方面来讲述这些年在测试工作中的实践、思考和感触。满满干货,分享给大家!
引言:一直以来,测试作为研发环节中不可缺少的角色存在着,但大多数中小型公司的测试团队却以最弱小的姿态生存着。在互联网模式的冲击下,快速迭代、持续发布、不断试错成为研发部门的关键字,这一切不断冲击着传统软件测试中赖以生存的“流程”、“规范”等优势。这些都在迫使测试管理者必须去思考测试应该坚持的是什么?如何不断打造难以被代替的竞争力?
传统测试团队的定位和价值
传统测试团队的定位
- 测试是为了确保业务、品牌价值的最大化。
- 当一个公司有较高的品牌知名度和用户量,质量对于品牌价值的影响非常大。比如大型网站出现宕机等问题,后果会非常严重。
- 降低研发和售后成本。
- 研发更多是创建型思维,而测试更多是破坏型思维,有开发和测试两种专业角色的存在,可以发挥各自的专长,提升工作效率,降低研发成本。
- 满足产品合乎规范、评级需要。
- 有些金融类的公司,对于合规要求很高:不允许同一个角色拥有过大的权限,不允许程序员既写代码,又负责发布、运维,因为这样会有安全风险。增加测试团队,既合乎规范又能降低风险。
测试价值在传统软件团队中的体现
- 传统软件是离线交付给用户的,一旦出现错误,将会带来直接的经济损失,需要测试能够确保版本的正确性;比如说微软在发布windows xp时发现有错误,只是光盘的成本就高得惊人;
- 软件使用者和软件提供者之间有很长的链路,一旦设计的产品存在瑕疵,需要较长的时间周期才能够修复,需要测试能够在软件研发过程中站在使用者的角度来发现问题;
- 当一个团队规模不断庞大时,测试效率问题不断显现,需要测试人员能够制订完善的流程,挖掘团队的效能;
- 所以测试是研发环节的最后一道防线,测试的目标就是最大化寻找产品中的缺陷,尽可能减少研发、测试、售后成本。
互联网化测试团队的定位和价值
互联网时代,产品的发布遵循短平快的原则,在互联网行业,如果一个产品半年发布一次,那么很快就会失去市场竞争力,被市场淘汰。所以作为测试团队,我们也应该顺应这个趋势,如何更短、更平、更快的来做好测试。这是互联网测试团队最核心的方向。
什么是互联网化测试团队
1.、具备专业测试能力基础。
- 包括测试理论基础、业务基础、专业测试能力(功能、性能、安全、数据等)、风险识别和控制能力;
2、一支新型的工程开发团队。
- 主要体现在全员都具备代码能力;能快速的设计和编写测试用例代码及测试系统代码(统称为工程代码);测试团队的规模不再取决于开发团队,而在于测试人员+工程代码所提供的服务能力;
3、打造持续交付能力,熟练掌握自动化测试工具。
- 24小时系统中任何应用随时提交发布,并在极短时间内(1-2小时)完成独立验证并发布上线,没有发布窗口限制;提高时间利用性,让企业更快速互联网化。
图解:自动分圈;环境的自动部署,支持在任何时刻任何系统的一键化部署;每次部署,都有对应的自动化来保证,都是平台化支持,由一整套平台来实现,只有异常时才需要人工介入。
图解:过去很多年,对于测试工作,我们都把重点放在使用哪些测试框架更方便,如何去写自动化脚本上面。而对于阿里巴巴来说,分层自动化、编写自动化脚本已经是平常的了。如何构建全自动化测试的能力是过去几年我们重点去解决的问题。因为整个测试过程的自动化了,就可以达到测试能力的低成本水平扩展,可以应对高频度的发布和交付。也正因为此,我们可以说:测试团队的规模不再取决于开发团队,而在于测试人员+工程代码所提供的“全自动化”服务能力。
4、从需求-开发-测试-发布-总结形成研发质量闭环。
- 质量不是测出来的,如何去给各个角色“赋能”,针对性的改造每个环节中的质量问题,才能最终去保障产品上线后的质量。
阿里巴巴测试数据实践
- 不同类型的自动化框架、工具,涉及到可测性、稳定性、研发效能等多方面。
- 持续交付能力:周一到周四24小时持续发布,无发布窗口限制。
- 工程能力:7K+自动化用例,并且在不断增加。
- 25%的需求从创建到集成测试通过不超过6小时。
- 46%的需求从创建到集成测试通过不超过24小时。
- 支撑全站每天项目或需求发布100+次。
- 开发与测试人员配比超过7.5:1。
- 月拦截故障数量级在100以上。
- 形成完整的测试平台及对外服务的能力。
如何打造一支精英化的测试团队
阿里云效助力众安保险成功转型,打造优秀测试团队
阿里云效平台创立于2012年,孵化自阿里巴巴B2B部门,支持着阿里巴巴网站、速卖通、1688、村淘4大网站,覆盖了阿里60%的事业部。通过项目管理、单测集成、环境管理、UI自动化、性能自动化、缺陷管理、用例管理等流程管理和分层自动化提供一站式研发效能提升服务,最终实现24小时持续集成持续交付。目前提供的产品包括:需求管理、立项管理、资源管理、配置管理、单测集成、环境管理、性能自动化、UI自动化、接口自动化,集成自动化等。
众安保险,是首家互联网保险公司,是首家将全部业务系统搬上云计算平台的金融企业,是互联网金融大潮中的标志性企业,是互联网保险业务创新的先锋,同时也是阿里云效平台的首家客户。在和云效平台合作的4个月时间,按照服务器申请占用一次提效5分钟,应用部署一次提效5分钟,集成单个分支提效5分钟,累计已提效232人日。是利用工具平台成功打造优秀测试团队的有力实践。
对于云效,众安保险高级架构师欧昀作出了这样的评价,“项目质量可以量化评估了,环境可以一键部署了,Bug可以有效跟踪回归了,Case可以积累复用了,重复工作可以自动化了。从开发到测试到发布,提供一站式质量保障服务,多维度保证项目上线质量,大幅提升流程效率。同时后续服务也很到位,有问必答热心解决,并且还提供多种培训,从系统操作到技术基础甚至员工发展规划,帮助公司员工快速成长。
关于讲师
傲野讲师介绍:2006年毕业于南昌大学,现就职于阿里巴巴B2B技术部,担任高级专家职务。曾就职于中兴通讯、支付宝等公司的研发及测试岗位,带领过交易、会员、开放平台、财务等不同类型的测试团队。在过往9年的工作中,经历了不同的行业产品和研发模式,善于站在质量角度来看待软件研发各环节的问题,并推动改进。同时在通过技术手段拓展测试边界,打造研发质量闭环等方面有着丰富的经验。
云效平台官网地址:yunxiao.aliyun.com
加入QQ交流群101628314申请云效平台免费试用
云效微博:阿里云效平台