硬件设备选型测试操作指南
目 录
1. 目的 ............................................................................................................................................................ 4 2. 适用范围 .................................................................................................................................................... 4 3. 测试依据 .................................................................................................................................................... 4 4. 选型测试要求 ............................................................................................................................................ 4
4.1. 选型测试定义 ................................................................................................................................. 4 4.2. 选型测试要求 ................................................................................................................................. 5 5. 准入/准出要求 ........................................................................................................................................... 5
5.1. 选型测试准入要求 ......................................................................................................................... 5 5.2. 选型测试准出要求 ......................................................................................................................... 5 6. 测试内容 .................................................................................................................................................... 6 7. 测试细则 .................................................................................................................................................... 6
7.1. 防火墙选型 ..................................................................................................................................... 6
7.1.1防火墙基本功能测试 ............................................................................................................ 6 7.1.2防火墙基本性能测试 ............................................................................................................ 6 7.1.3防火墙安全性测试 ................................................................................................................ 7 7.1.4防火墙可管理性测试 ............................................................................................................ 7 7.2 . IDS和IPS设备选型 ...................................................................................................................... 7
7.2.1 IDS功能测试 ........................................................................................................................ 8 7.2.2 IDS性能测试 ........................................................................................................................ 8 7.2.3 IPS功能测试 ......................................................................................................................... 8 7.2.4 IPS性能测试 ......................................................................................................................... 9 7.3反垃圾邮件网关选型 ....................................................................................................................... 9
7.3.1功能测试 ................................................................................................................................ 9 7.3.2性能测试 .............................................................................................................................. 10 7.4 . IPSec VPN网关选型 .................................................................................................................... 10 7.5. SSL VPN网关选型 ....................................................................................................................... 10
7.5.1 SSL VPN功能测试 ............................................................................................................. 10
7.5.2 SSL VPN性能测试 ............................................................................................................. 10 7.6. 交换机选型 ................................................................................................................................... 11
7.6.1交换机基本测试 .................................................................................................................. 11 7.6.2交换机性能测试 .................................................................................................................. 11 7.6.3交换机可靠性测试 .............................................................................................................. 11 7.6.4交换机可扩展性测试 .......................................................................................................... 11 7.6.5交换机可管理性测试 .......................................................................................................... 12 7.6.6交换机安全性测试 .............................................................................................................. 12 7.6.7接口协议测试 ...................................................................................................................... 12 7.6.8环境适应测试 ...................................................................................................................... 12 7.7. 路由器选型 ................................................................................................................................... 13
7.7.1路由器测试基本要求 .......................................................................................................... 13 7.7.2路由器性能测试 .................................................................................................................. 13 7.7.3路由器可靠性测试 .............................................................................................................. 13 7.7.4路由器可扩展性测试 .......................................................................................................... 13 7.7.5路由器可管理性测试 .......................................................................................................... 14 7.7.6路由器安全性测试 .............................................................................................................. 14 7.7.7接口协议测试 ...................................................................................................................... 14 7.7.8环境适应测试 ...................................................................................................................... 14 7.8. 服务器选型 ................................................................................................................................... 15
7.8.1关键测试项 .......................................................................................................................... 15 7.8.2主要技术指标 ...................................................................................................................... 16 7.9. 存储设备选型 ............................................................................................................................... 17
7.9.1性能测试 .............................................................................................................................. 17 7.9.1安全性和可靠性测试 .......................................................................................................... 17 7.9.1可扩展性测试 ...................................................................................................................... 17 7.10. 其它设备产品 ............................................................................................................................. 17 8. 测试合格判定条件 .................................................................................................................................. 17 9. 测试说明 .................................................................................................................................................. 18 10. 附录 ........................................................................................................................................................ 18
10.1. 测试方法 ..................................................................................................................................... 18 10.2. 测试工具 ..................................................................................................................................... 22 10.3. 测试资源 ..................................................................................................................................... 22
1. 目的
为更加规范地对软硬件产品进行量化或非量化的对比测试,给用户提供科学、准确、权威的质量检测结果,避免用户选择不符合要求的产品,特制定本操作指南作为XX公司信息化评测实验室开展选型测试工作的依据。
2. 适用范围
本细则适用于XX公司信息化评测实验室的选型测试的实施。适用于防火墙类产品、IDS和IPS类产品、VPN类产品、交换机、路由器、服务器、存储设备、其它设备等产品的选型测试。
3. 测试依据
(1)GB/T25000.51-2010软件工程 软件产品质量要求与评价(SQuaRE)商业现货
(COTS)软件产品的质量要求和测试细则
(2)《软硬件平台架构和资源分配指导意见》 (3)《XX公司信息系统软硬件平台技术规范》
4. 选型测试要求
4.1. 选型测试定义
选型测试是指从用户的需求出发,依据招标文件的技术要求以及国家和行业的相关标准,坚持公平、公正、客观的原则,对信息系统或软硬件产品进行测试。从全方位角度对方案中涉及的产品进行评价,包括产品功能与业务的符合性、产品功能的正确性、产品的处理能力、产品的性价比等方面,为用户选择信息系统及软硬件产品提供可量化的评测结果。
4.2. 选型测试要求
选型测试需指定统一的测试范围、测试流程、测试资源、测试指标以及评价准则等内容,其中以确定统一的测试指标和评价准则最为核心。
1. 确定统一的测试指标
必须从委托方的实际选型需求出发,尽量选择参测产品具有可比性的属性进行测试,不具可比性的属性可作为该产品的特色说明,以减少因产品差异性而带来的争议。
2. 确定统一的评价准则
必须充分考虑到各产品的差异化,尽量做到公平,应综合考虑用户在如资源、响应时间等多方面指标的接受程度,制定评价准则。
选型测试应依据委托方的技术要求,确定统一的测试指标和评价准则,从功能实现、业务流程、系统性能等多个角度出发对参测产品进行统一的检测,提供客观的结果作为用户选型的重要依据。
5. 准入/准出要求
5.1. 选型测试准入要求
1. 用户提交选型测试申请表;
2. 用户提交经确认的业务规范和技术规范; 3. 确定统一的选型技术指标; 4. 确定统一的指标评价准则;
5. 统一的测试环境准备就绪(硬件、软件、数据)。
5.2. 选型测试准出要求
1. 所有产品都通过测试; 2. 完成选型测试过程记录; 3. 完成数据的整理和分析; 4. 完成选型测试报告并签署确认。
6. 测试内容
选型测试主要包括防火墙类产品、IDS和IPS类产品、VPN类产品、交换机、路由器、服务器、存储设备、其它设备等产品的选型测试。
7. 测试细则 7.1. 防火墙选型
7.1.1防火墙基本功能测试
支持VLAN模式及VPN模式; 支持虚拟防火墙; 考虑地址转换能力; 过滤功能;
后台配置管理功能;
7.1.2防火墙基本性能测试
测试防火墙的性能,都要遵守IETF提出的RFC3511标准,该标准规范了测试防火墙性能的方法和测试项,这些测试项包括: CPU类型及主频; 内存大小; 最大吞吐量;
IP吞吐量(IP Throughput)
并发的TCP连接数量(Concurrent TCP Connection Capacity)
最大地TCP连接建立速度(Maximum TCP Connection Establishment Rate) 最大地TCP连接拆除速度(Maximum TCP Connection Tear Down Rate) HTTP转发率(HTTP Transfer Rate)
最大地HTTP交易速率(Maximum HTTP Transaction Rate) 防火墙对IP包分拆组合地处理能力(IP Fragmentation Handling) 时延(Latency)
7.1.3防火墙安全性测试
关键部件冗余性测试; 身份认证方式验证; 访问控制能力;
防DoS及DDoS攻击能力;
对非法流量地防范能力(Illegal Traffic Handling)
7.1.4防火墙可管理性测试
支持SNMP协议; 支持远程集中管理;
提供详细日志记录和管理分析功能; 能够提供实时监控功能;
具备简单方便的配置备份与恢复机制;
7.2 . IDS和IPS设备选型
IDS本质上是一种监听系统,它依照一定的安全策略,对网络与系统地运行状况进行监测,尽可能发现、报告、记录各种攻击企图、攻击行为或者攻击结果,以保证信息系统的机密性、完整性和可用性。IDS可分为主机型(HIDS)和网络型(NIDS),目前主流IDS产品均采用两者有机结合地混合型架构。
IPS串联于通信线路之内,是既具有IDS的检测功能,又能够实时中止网络入侵行为的新型安全技术设备。IPS由检测和防御两大系统组成,具备从网络到主机的防御措施与预先设定的响应设置。
7.2.1 IDS功能测试
攻击识别能力
发送源地址、目标地址、源端口、目标端口都相同的IP数据包,使IP协议产生循环回路而崩溃;发送多个分段IP数据包,使包重装时包的数据部分越界,从而引起协议和系统不可用;将ICMP以多个分段包发送,使重装数据部分大于65535字节数,超出TCP/ IP协议规定范围,从而引起协议崩溃; 抗攻击能力
在某一时间内重复向一台目标主机进行synFlooding拒绝服务攻击; 过滤能力
设置过滤规则,根据需要对网络上的数据包和审计文件记录中的原始信息进行过滤; 报警能力
模拟入侵,检测该入侵,通知防火墙采取应急措施; 日志管理
把发现可疑行为记录到数据库; 报告管理
生成、管理入侵报告;
7.2.2 IDS性能测试
最大吞吐量大小 延迟时间 负荷能力 资源占用情况
7.2.3 IPS功能测试
入侵保护能力
阻断黑客攻击、阻断蠕虫和网络攻击、阻断间谍软件攻击、阻断P2P下载软件、阻
断即时通讯软件、阻断网络在线游戏、阻断在线视频等能力; 系统管理能力
支持远程管理方式、远程认证, 有完善的后台日志管理功能,支持自定义规则;
7.2.4 IPS性能测试
最大吞吐量大小 延迟时间 负荷能力 资源占用情况
7.3反垃圾邮件网关选型
反垃圾邮件网关作为安全产品的重要组成部分进一步扩展成为具有反垃圾邮件、防范蠕虫病毒攻击、防范DDoS攻击和防范漏洞扫描等于一体的综合性信息安全产品。反垃圾邮件网关系统的各项指标包括POP3,SMTP和IMAP邮件网关的吞吐量、在一定时间内发送的E-mail的数量、在一定时间内发送的E-mail附件的数量、邮件转发成功率、最大SMTP并发连接数、SMTP请求处理的速度等。
从测试方法上来说,首先要进行基准测试,也就是在反垃圾邮件网关上不启用任何过滤规则,验证其上述各项性能指标。然后启用各种过滤规则,分别验证反垃圾邮件网关在启用垃圾邮件扫描、病毒邮件和附件扫描、DDoS攻击扫描等规则下的性能。
7.3.1功能测试
反垃圾邮件功能; 杀病毒邮件功能; 后台管理功能; 过滤规则; 协议分析能力; 混合反垃圾技术能力;
误判邮件挽回和补救功能;
7.3.2性能测试
负载均衡能力; 负荷能力;
7.4 . IPSec VPN网关选型
测试方法是使用测试仪表来仿真IPSec网关,和被测IPSec网关建立IPSec隧道来评估被测设备所支持的IPSec隧道的数量以及隧道建立的速度,在隧道建立成功后,测试仪表还可以同时仿真IPSec网关后的主机以及被保护的网络,以验证隧道之上2~7层数据和应用的转发性能与QoE指标。
7.5. SSL VPN网关选型
从技术上来说,SSL VPN也有三种类型,包括无客户端模式(Clientless Mode)、简化模式(Thin Client Mode)和安装客户端模式(Tunnel Mode)。目前,能够用仪表进行性能测试的,主要是无客户端模式,也就是通常讨论的SSL测试。
7.5.1 SSL VPN功能测试
SSL 协议进行认证和加密; SSL VPN的可用性; SSL VPN的易用性; SSL VPN的安全性;
7.5.2 SSL VPN性能测试
在不同加密算法下的有效吞吐量(Goodput) 并发连接数(Concurrent Connection)
新建SSL 连接的速率(Connection Rate)
7.6. 交换机选型 7.6.1交换机基本测试
工作协议层测试; 插槽数量; 端口类型及数量;
7.6.2交换机性能测试
数据包传输能力测试; 数据传输控制、管理能力测试;
7.6.3交换机可靠性测试
交换机部分组件应具备冗余性配置; 交换机板卡、模块、电源应支持热插拔;
应具备有效的散热方式,确保身温度处于允许范围之内;
7.6.4交换机可扩展性测试
插槽扩展能力; 端口、板卡扩展能力;
支持协议、服务的种类和扩展能力; 软件兼容性; 硬件兼容性; 升级能力和维护性;
7.6.5交换机可管理性测试
支持通过网络实现远程管理的能力; 管理界面易性;
7.6.6交换机安全性测试
支持访问控制; 支持登录控制; 防止访问攻击; 数据加密传输;
满足XX公司安全管理的的相关规定;
7.6.7接口协议测试
ATM协议测试
测试ATM协议要求; PPP协议测试
测试PPP协议的一致性; IP协议测试
测试IP协议一致性; 路由协议测试
测试路由协议一致性; 测试整机功耗等内容;
7.6.8环境适应测试
包括高低温、湿度测试和高低温存储测试;
7.7. 路由器选型
7.7.1路由器测试基本要求
路由器体系结构; CPU类型; 内存大小; 接口类型及数量; 插槽数据; 能否上机架;
7.7.2路由器性能测试
数据包传输能力测试; 数据传输控制、管理能力测试;
7.7.3路由器可靠性测试
路由器部分组件应具备冗余性配置; 路由器板卡、模块、电源应支持热插拔;
应具备有效的散热方式,确保身温度处于允许范围之内;
7.7.4路由器可扩展性测试
插槽扩展能力; 端口、板卡扩展能力;
支持协议、服务的种类和扩展能力; 软件兼容性; 硬件兼容性; 升级能力和维护性;
7.7.5路由器可管理性测试
支持通过网络实现远程管理的能力; 管理界面易性;
7.7.6路由器安全性测试
支持访问控制; 支持登录控制; 防止访问攻击; 数据加密传输;
满足XX公司安全管理的的相关规定;
7.7.7接口协议测试
ATM协议测试
测试ATM协议要求; PPP协议测试
测试PPP协议的一致性; IP协议测试
测试IP协议一致性; 路由协议测试
测试路由协议一致性; 测试整机功耗等内容;
7.7.8环境适应测试
包括高低温、湿度测试和高低温存储测试;
7.8. 服务器选型 7.8.1关键测试项
服务器测试模拟服务器在实际工作环境中HTTP和FTP等服务,测试服务器的处理能力。
具体测试项目如下:
1) 配置对比:对服务器产品采用的 CPU、主板、总线、内存、磁盘系统、网络系
统、显示等配置进行比较;
2) CPU性能:CPU是服务器性能的基础,影响CPU处理能力的技术指标有主频、
系统总线速度、缓存、制造工艺等。另外CPU构架、核心数据、功耗、兼容性也应综合考虑。
3) 内存性能:内存性能的技术指标为内存类型、容量、带宽、速度、延时、是否
支持纠错、是否支持热插拔等。
4) 系统总线性能:系统总线由数据总线、地址总线、控制总线组成,系统总线影
响着服务器的计算能力、计算规范和寻址能力等。
5) 网卡性能:测试指标包括网卡类型、速度、接口、最大网络流量、响应时间,
以及是否支持负载均衡等。
6) 硬盘性能:影响硬盘性能的技术指标有硬盘的容量、转速、缓存大小、量大内
部传输速率、外面传输率、连续无故障时间、寻道时间等。
7) 服务器可靠性:电源稳定性高、通风散热良好、采用冗余电源、冗余硬盘阵列、
冗余网卡等技术。
8) 服务器扩展性:具备扩展处理器、内存、硬盘、适配器等硬件设备的能力;具
备热插拔技术、硬盘、PCI设风扇和电源等可在线更换。
9) 服务器可管理性:硬件应容易操作、维护和修复;应提供便捷的管理软件;支
持远程维护和实时监控;支持故障报警与诊断。
10) 可虚拟化特性:能在一台物理服务器上虚拟多个逻辑服务器;逻辑服务器应能
动态调整CPU、内存、IO、硬盘等资源。
7.8.2主要技术指标
指标 类型 主频 CPU 缓存 CPU核心数 CPU最大扩展数 内存类型 内存大小 物理内存 内存最大容量 容错技术 内存带宽 接口类型 内置硬盘数据及容量 硬盘 可配硬盘数据及容量 缓存 转速 分区能力 分区 最大分区数量 IO插槽 SISI接口 IO及外设 外接RAID接口 网络接口 DVD光驱 冗余技术 其它 热插拔 操作系统 说明
7.9. 存储设备选型 7.9.1性能测试
存储容量。 数据传输速度。 高容量高速缓存。 平均无故障时间。
7.9.1安全性和可靠性测试
冗余配置。
支持热插拔、支持在线设备维护。
磁盘阵列、虚拟磁带库等设备采用RAID技术,支持主要RAID级别。 提供数据保护功能。
支持存储设备本地、远程数据复制、及数据快照功能。
7.9.1可扩展性测试
支持自身容量扩充。 支持外接设备。
7.10. 其它设备产品
其它设备产品的选型测试依据制定的技术指标进行测试,大致从功能性、性能、可靠性、可扩展性、可管理性、安全性等多方面进行测试,全面评价产品质量和符合性。
8. 测试合格判定条件
所有参测产品的所有测试指标都通过测试,并完成测试结果的记录,符合准出条件。
9. 测试说明
本指南解释权、修订权归XX公司信息化评测实验室所有。
10. 附录
10.1. 测试方法
1. 功能分解
功能分解是将需求规格说明中每一个功能加以分解,确保各个功能被全面地测试。功能分解是一种较常用的方法。
步骤如下:
1) 使用程序设计中的功能抽象方法把程序分解为功能单元; 2) 使用数据抽象方法产生测试每个功能单元的数据。
功能抽象中程序被看成一种抽象的功能层次,每个层次可标志被测试的功能,层次结构中的某一功能又由其下一层功能定义。按照功能层次进行分解,可以得到众多的最低层次的子功能,以这些子功能为对象,进行测试用例设计。
数据抽象中,数据结构可以由抽象数据类型的层次图来描述,每个抽象数据类型有其取值集合。程序的每一个输入和输出量的取值集合用数据抽象来描述。
2. 等价类划分
等价类划分是在分析需求规格说明的基础上,把程序的输入域划分成若干部分,然后在每部分中选取代表性数据形成测试用例。
步骤如下:
1) 划分有效等价类:对规格说明是有意义、合理的输入数据所构成的集合; 2) 划分无效等价类:对规格说明是无意义、不合理的输入数据所构成的集合; 3) 为每一个等价类定义一个唯一的编号;
4) 为每一个等价类设计一组测试用例,确保覆盖相应的等价类。
3. 边界值分析
边界值分析是针对边界值进行测试的。使用等于、小于或大于边界值的数据对程序进行测试的方法就是边界值分析方法。
步骤如下:
1) 通过分析规格说明,找出所有可能的边界条件;
2) 对每一个边界条件,给出满足和不满足边界值的输入数据; 3) 设计相应的测试用例。
对满足边界值的输入可以发现计算缺陷或错误,对不满足的输入可以发现域缺陷或错误。该方法会为其它测试方法补充一些测试用例,绝大多数测试都会用到本方法。
4. 判定表
判定表由四部分组成:条件桩、条件条目、动作桩、动作条目。任何一个条件组合的取值及其相应要执行的操作构成规则,条目中的每一列是一条规则。
条件引用输入的等价类,动作引用被测软件的主要功能处理部分,规则就是测试用例。
建立并优化判定表,把判定表中每一列表示的情况写成测试用例。 该方法的使用有以下要求:
1) 规格说明以判定表形式给出,或是很容易转换成判定表; 2) 条件的排列顺序不会影响执行哪些操作; 3) 规则的排列顺序不会影响执行哪些操作;
4) 每当某一规则的条件已经满足,并确定要执行的操作后,不必检验别的规则; 5) 如果某一规则的条件得到满足,将执行多个操作,这些操作的执行与顺序无关。
5. 因果图
因果图方法是通过画因果图,把自然语言描述的功能转换为判定表,然后为判定表的每一列设计一个测试用例。
步骤如下:
1) 分析程序规格说明,引出原因(输入条件)和结果(输出结果),并给每个原因
和结果赋予一个标识符;
2) 分析程序规格说明中语义的内容,并将其表示成连接各个原因和各个结果的“因
果图”;
3) 在因果图上标明约束条件;
4) 通过跟踪因果图中的状态条件,把因果图转换成有限项的判定表; 5) 把判定表中每一列表示的情况生成测试用例。
如果需求规格说明中含有输入条件的组合,宜采用本方法。有些软件的因果图可能非常庞大,以至于根据因果图得到的测试用例数目非常大,此时不宜使用本方法。
6. 错误推测法
错误推测法是有经验的测试工程师,通过列出可能有的缺陷或错误和易错情况表,写出测试用例的方法。
7. 正交试验法
正交试验法是从大量实验点中挑出适量的、有代表性的点,应用正交表,合理地安排实验的一种科学的试验设计方法。
利用正交试验法来设计测试用例时,首先要根据被测软件的规格说明书找出影响功能实现的操作对象和外部因素,把它们当作因子,而把各个因子的取值当作状态,生成二元的因素分析表。然后,利用正交表进行各因子的状态的组合,构造有效的测试输入数据集,并由此建立因果图。这样得出的测试用例的数目将大大减少。
8. 场景法
场景法主要是对系统运行流程进行分析,从业务流程考虑用例应包括的哪些基本流和备选流,通过用例场景并结合各路径的触发条件来确定用例应遵从的流程。主要用于业务流程的测试用例设计。
步骤如下:
1) 画出所测模块的业务流程图;
2) 根据业务流程图和用户使用手册,归纳出主、备选流关系图; 3) 列出各路径的触发条件对照表;
4) 根据主、备选流关系图和各路径的触发条件对照表,确定不同的用例场景; 5) 对每个场景分别设计测试用例。
9. 负载测试
负载测试是通过逐步增加系统负载,测试系统性能的变化,并最终确定在满足性能指标的情况下,系统所能承受的最大负载量的测试。
1) 负载测试是站在用户的角度去观察在一定条件下软件系统的性能表现; 2) 负载测试的预期结果是用户的性能需求得到满足。此指标一般体现为响应时间、
交易容量、并发容量、资源使用率等。
10. 压力测试
压力测试是通过逐步增加系统负载,测试系统性能的变化,并最终确定在什么负载条件下系统性能处于失效状态,并以此来获得系统能提供的最大服务级别的测试。通俗地讲,压力测试是为了发现在什么条件下系统的性能会变得不可接受。
压力测试是能让我们识别系统的弱点和在极限负载下程序将如何运行。
11. 并发性能测试
并发性能测试的过程,是一个负载测试和压力测试的过程。即逐渐增加并发用户数负载,直到系统的瓶颈或者不能接受的性能点,通过综合分析交易执行指标、资源监控指标等来确定系统并发性能的过程。
并发性能测试是负载压力测试中的重要内容。负载测试往往就会使用并发来创造负载,之所以把并发性能测试单独提出来,是因为并发性能测试往往涉及服务器的并发容量,以及多进程/多线程协调同步可能带来的问题。这是要特别注意,必须测试的。
12. 疲劳测试
采用系统稳定运行情况下能够支持的最大并发用户数,或者日常运行用户数,持续执行一段时间业务,保证达到系统疲劳强度需求的业务量,通过综合分析交易执行指标和资源监控指标,来确定系统处理最大工作量强度性能的过程。 一般情况下利用疲劳测试来模拟系统日常业务操作,来衡量系统稳定性及可靠性。
13. 大数据量测试
大数据量测试包括独立的数据量测试和综合数据量测试两类。
独立的数据量测试是指针对某些系统存储、传输、统计、查询等业务进行的大数据量测试。
综合数据量测试指和压力性能测试、负载性能测试、疲劳性能测试相结合的综合测试。
14. 基准测试
当软件系统中增加一个新的模块的时候,需要做基准测试,以判断新模块对整个软件系统的性能影响。按照基准测试的方法,需要打开/关闭新模块至少各做一次测试。关闭模块之前的系统各个性能指标记下来作为基准(Benchmark),然后与打开模块状态下的系统性能指标作比较,以判断模块对系统性能的影响。
15. 可恢复性测试
测试系统能否快速地从错误状态中恢复到正常状态。比如,在一个配有负载均衡的系统中,主机承受了压力无法正常工作后,备份机是否能够快速地接管负载。
可恢复测试通常结合压力测试一起来做。
10.2. 测试工具
测试工具是指为实施测试活动而采用的工具。一切能够满足测试需求、协助测试活动发现问题的工具都是测试工具。
10.3. 测试资源
选型测试涉及到的测试资源可以分为硬件环境、软件环境、测试人员以及测试数据四类,这几类资源的均衡分配是公平选型的基础。
1. 硬件环境
包括相同的服务器机型、CPU、内存以及存储资源等。在对各参测产品并行实施性能测试时,还须考虑到局域网环境下带宽的争用可能带来的影响,尽量使各款产品分布在不同的交换机上。
2. 软件环境
包括相同的操作系统、中间件以及其他的第三方软件等,确保各款软件的版本和默认配置完全一致。
3. 测试人员
按参测产品数量进行分组、每组负责一款产品,并以抽签的方式进行产品分配。 4. 测试数据
统一采用与所有参测产品无关的同一批第三方数据,保证测试的公平性。
因篇幅问题不能全部显示,请点此查看更多更全内容