文档介绍:第 I 页
XXX大数据平台
编号:
密级:
性能测试方案
[V1-]
拟 制 人:
审 核 人:
批 准 人:
[2021年01月08日]
文件变更记录试
算法
读取
验证功能
Hadoop/ Spark的读取测试
测试目的
比照Hadoop/ Spark的读取算法,进展数据容量100G读取操作时,redpower效劳器运行情况
前置条件
操作步骤
容量100G
2. 对redpower效劳器进展资源监控
第 4 页
3. 客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景2:数据容量500G时,进展读取算法的基准测试
用例名称
数据量500G,读取功能的基准测试
算法
读取
验证功能
Hadoop/ Spark的读取测试
测试目的
比照Hadoop/ Spark的读取算法,进展数据容量500G读取操作时,redpower效劳器运行情况
前置条件
操作步骤
2. 对redpower效劳器进展资源监控
3. 客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
第 5 页
Spark
Spark
场景3:数据容量1T时,进展读取算法的基准测试
用例名称
数据量1T,读取功能的基准测试
算法
读取
验证功能
Hadoop/ Spark的读取测试
测试目的
比照Hadoop/ Spark的读取算法,进展数据容量1T读取操作时,redpower效劳器运行情况
前置条件
操作步骤
2. 对redpower效劳器进展资源监控
3. 客户端执行Hadoop/ Spark的读取代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
第 6 页
Hadoop/ Spark写入算法的基准测试
场景1:数据容量100G时,进展写入算法的基准测试
用例名称
数据量100G,写入功能的基准测试
算法
写入
验证功能
Hadoop/ Spark的写入测试
测试目的
比照Hadoop/ Spark的写入算法,进展数据容量100G写入操作时,redpower效劳器运行情况
前置条件
操作步骤
2. 对redpower效劳器进展资源监控
3. 客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景2:数据容量500G时,进展写入算法的基准测试
用例名称
数据量500G,写入功能的基准测试
算法
写入
第 8 页
验证功能
Hadoop/ Spark的写入测试
测试目的
比照Hadoop/ Spark的写入算法,进展数据容量500G写入操作时,redpower效劳器运行情况
前置条件
操作步骤
2. 对redpower效劳器进展资源监控
3. 客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间
备注
Hadoop
Spark
Spark
场景3:数据容量1T时,进展写入算法的基准测试
用例名称
数据量1T,写入功能的基准测试
算法
写入
验证功能
Hadoop/ Spark的写入测试
测试目的
比照Hadoop/ Spark的写入算法,进展数据容量1T写入操作时,redpower
第 8 页
效劳器运行情况
前置条件
操作步骤
2. 对redpower效劳器进展资源监控
3. 客户端执行Hadoop/ Spark的写入代码
运行结果
类别
CPU使用率
内存使用率
I/O
NETWORK
响应时间