TCon 2012之分布式系统测试实践

2023-10-31 14:48

本文主要是介绍TCon 2012之分布式系统测试实践,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

转自:http://www.taobaotesting.com/blogs/2138


分布式系统在越来越多的公司和产品系统中应用,作为分布式系统要求高扩展,高稳定,高可靠,高可用,并且部署复杂、软件角色多、硬件依赖强,对于测试来说,分布式系统的测试面临以下难点:

n  分布式事务:多机、多角色协作,测试场景多且复杂

n  多线程:多线程场景难模拟

n  多系统:关联的外围系统多,而且又都是分布式

n  一致性要求:强一致、弱一致、最终一致

n  稳定性要求:如何保证7*24小时系统稳定

n  可用性要求:各种系统异常场景,软件、硬件因素

n  兼容性要求:多客户端服务端版本,多服务方式(REST、JavaClient)

n  性能要求:吞吐量和响应时间,软硬件因素

如何来应对这个难题,可以从如下几个方面来应对:

(1)       多层次测试保障。将测试分为不同的层次,在每个层次注重不同的测试重点。

a)         单元测试:开发人员完成,覆盖基本逻辑

b)        白盒异常测试:有针对的对各个系统异常进行代码级模拟,验证系统是否有能力处理并保持可用

c)         接口测试:保证服务的各个对外接口符合预期,基本功能验证

d)        集成测试:高压力、高并发、多种系统协作的基本功能和异常场景测试(软件、硬件异常)

e)         稳定性测试:高压力模拟常见应用和故障的混合场景,多种方式并行进行。

f)         仿真测试:建立客户应用回归环境,仿真客户使用场景

(2)       低成本测试。所谓低成本测试就是在测试过程中采取一系列的策略,降低测试成本,包括在前期参与设计方案评审和Code Review。明确不可靠模块的应用风险,核心模块的持续投入,自动化回归和多环境并行测试,并且参与线上应用情况的分析和线上故障的排查,做好bug的应对方案。

(3)       高效定位问题。从测试用例出发,确定出现bug的特定场景,根据完善的日志和监控体系来进一步分析出现问题的条件,从而能逐级缩小测试用例,从黑盒的测试用例转入白盒测试用例,另外可以利用自动化测试分析工具来进行分析。最核心的还是要对产品本身有深入的了解,产品的需求和产品的实现都要理解。

(4)       DST,分布式系统测试工具。

DST拥有以下的强大功能:

ü  支持编写测试用例实现多机并行测试

ü  可集成多种已有的测试工具及用例

ü  可配置的监控数据自动收集与展示

ü  日志自动分析与查看

ü  可扩展的任务执行控制功能

ü  性能、功能结果对比

ü  测试报告自动生成

DST的整体框架:

其中WebServer 主要提供了测试管理的功能,包括用例场景,实验室,集群管理和监控日志查看,和测试报告生成的功能。

测试集群完成了测试用例的分发和执行,并且通过TestCaseRunner来集成多种测试工具。

数据分析平台则主要完成监控数据和日志数据的存储和分析,并将分析结果推送给WebServer以供用户查看。

DST的页面图

除了以上几点,神秀还分享了一些在分布式系统测试中积累的一些经验:

(1)       分布式事务最难搞。需要注意的点有三个:

a)         单系统、单机出现异常不能影响事务正确性

b)        不可过分信任依赖系统

c)         系统设计时的检查更为重要,多系统异常难模拟,难考虑完整。在系统设计时的reivew更能提前发现问题,避免后续测试出现问题再排查浪费时间。

(2)       性能的小问题不容忽视。主要体现在以下几个方面:

a)         关键性能指标看不到是系统稳定性的地雷

b)        通过关注测试系统的性能表现可以快速发现线上系统隐患

c)         测试人员比开发人员对线上性能更有发言权

d)        及时的给出测试数据和改进意见是测试价值的体现

e)         关注线上性能表现可以完善测试用例,更贴近实际

(3)       GC是性能的重要因素。可以参考的点:

a)         减少GC暂停时间是优化的目标

b)        避免内存碎片对应用的影响

c)         观察线上系统GC状况避免故障(内存泄露、FullGc)

d)        Gc 日志和gc 监控帮助我们发现最合理的配置

(4)       线上最容易发现隐患,测试人员要多参与线上应用情况和线上问题的分析。

(5)       有bug也不能影响系统稳定,系统不可能没有bug,往往出了bug如何处理比bug本身更重要,这对系统的健壮性和系统的自我调节和报警能力提出了更高的要求。




这篇关于TCon 2012之分布式系统测试实践的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/316102

相关文章

Spring Boot集成/输出/日志级别控制/持久化开发实践

《SpringBoot集成/输出/日志级别控制/持久化开发实践》SpringBoot默认集成Logback,支持灵活日志级别配置(INFO/DEBUG等),输出包含时间戳、级别、类名等信息,并可通过... 目录一、日志概述1.1、Spring Boot日志简介1.2、日志框架与默认配置1.3、日志的核心作用

破茧 JDBC:MyBatis 在 Spring Boot 中的轻量实践指南

《破茧JDBC:MyBatis在SpringBoot中的轻量实践指南》MyBatis是持久层框架,简化JDBC开发,通过接口+XML/注解实现数据访问,动态代理生成实现类,支持增删改查及参数... 目录一、什么是 MyBATis二、 MyBatis 入门2.1、创建项目2.2、配置数据库连接字符串2.3、入

Android Paging 分页加载库使用实践

《AndroidPaging分页加载库使用实践》AndroidPaging库是Jetpack组件的一部分,它提供了一套完整的解决方案来处理大型数据集的分页加载,本文将深入探讨Paging库... 目录前言一、Paging 库概述二、Paging 3 核心组件1. PagingSource2. Pager3.

在Java中使用OpenCV实践

《在Java中使用OpenCV实践》用户分享了在Java项目中集成OpenCV4.10.0的实践经验,涵盖库简介、Windows安装、依赖配置及灰度图测试,强调其在图像处理领域的多功能性,并计划后续探... 目录前言一 、OpenCV1.简介2.下载与安装3.目录说明二、在Java项目中使用三 、测试1.测

MyBatis-Plus 自动赋值实体字段最佳实践指南

《MyBatis-Plus自动赋值实体字段最佳实践指南》MyBatis-Plus通过@TableField注解与填充策略,实现时间戳、用户信息、逻辑删除等字段的自动填充,减少手动赋值,提升开发效率与... 目录1. MyBATis-Plus 自动赋值概述1.1 适用场景1.2 自动填充的原理1.3 填充策略

Olingo分析和实践之EDM 辅助序列化器详解(最佳实践)

《Olingo分析和实践之EDM辅助序列化器详解(最佳实践)》EDM辅助序列化器是ApacheOlingoOData框架中无需完整EDM模型的智能序列化工具,通过运行时类型推断实现灵活数据转换,适用... 目录概念与定义什么是 EDM 辅助序列化器?核心概念设计目标核心特点1. EDM 信息可选2. 智能类

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

Olingo分析和实践之ODataImpl详细分析(重要方法详解)

《Olingo分析和实践之ODataImpl详细分析(重要方法详解)》ODataImpl.java是ApacheOlingoOData框架的核心工厂类,负责创建序列化器、反序列化器和处理器等组件,... 目录概述主要职责类结构与继承关系核心功能分析1. 序列化器管理2. 反序列化器管理3. 处理器管理重要方

虚拟机Centos7安装MySQL数据库实践

《虚拟机Centos7安装MySQL数据库实践》用户分享在虚拟机安装MySQL的全过程及常见问题解决方案,包括处理GPG密钥、修改密码策略、配置远程访问权限及防火墙设置,最终通过关闭防火墙和停止Net... 目录安装mysql数据库下载wget命令下载MySQL安装包安装MySQL安装MySQL服务安装完成

SpringBoot整合(ES)ElasticSearch7.8实践

《SpringBoot整合(ES)ElasticSearch7.8实践》本文详细介绍了SpringBoot整合ElasticSearch7.8的教程,涵盖依赖添加、客户端初始化、索引创建与获取、批量插... 目录SpringBoot整合ElasticSearch7.8添加依赖初始化创建SpringBoot项