![](https://img-blog.csdnimg.cn/20190918140053667.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据测试技术
文章平均质量分 64
Hibench
Python测试开发
前端测试,接口测试,性能测试,安全测试
展开
-
大数据平台CDH性能测试之Hibench
CDH性能测试之HiBenchHiBench简介 在大数据领域,集群的性能主要是整体的网络和数据吞吐量决定的。使用Hibench测试时,使用传统电口千兆网络的任务,运行时间比光网任务慢10s左右。Hibench是用来衡量CDH性能的基准测试集,包含:文件系统IO性能,系统的批处理吞吐,数据仓库OLAP分析算子,机器学习的处理能力,以及流处理系统的能力。 HiBench简介 Hibench是Intel推出的大数据基准测试工具,提供对hive(aggregation,scan,join),排序(sort,TER原创 2021-08-24 14:33:46 · 3854 阅读 · 0 评论 -
ETL测试方法-过程-技术-难点
ETL测试 目的是确保从源到目的地数据经过业务转换的准确性; 从源到目的地数据各阶段的数据验证; ETL测试类型 Production Validation Testing 该类型的ETL测试是在数据迁移至生产系统时进行的。为了保证生产业务的正常运营,生产系统中的数据必须以正确的顺序进行排序。在该ETL测试类型中要注意从数据层面进行自动化测试和管理能力的植入。 Source to Target Testing(Validation Testing) 该类型的测试主要元组转换的数据是否满足预期的转换原创 2021-05-10 15:13:49 · 1134 阅读 · 5 评论