![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 66
无级程序员
这个作者很懒,什么都没留下…
展开
-
PGSql性能测试
一个40亿的表,分成128个区,16384个slot,每个表分区大约3000W数据, 每个slot大约25W数据,虚拟机8C16G,1T空间,测试导出一个slot数据性能,结果如下:select * from table where slot_id=0;以slot_id为索引:大约100多秒,以slot_id和slice_id为索引时大约2秒,很奇怪的结果。另外,数据增加到60亿,即每个表...原创 2020-04-30 16:19:00 · 2063 阅读 · 0 评论 -
Redis的ziplist与hashtable性能对比测试
测试一下ziplist长度为2048时性能。机器为4C,8G虚拟机原创 2020-04-29 20:22:58 · 952 阅读 · 0 评论 -
redis性能测试报告结果
redis性能测试1. 环境配置:2. 测试准备:2.1 每服务器一个Redis的结果:2.2 每服务器两个Redis的结果:3. 结论:由于项目需要,要查询一个数量巨大的键值对,数据量大约6亿。先是在内存中用hashmap,虽然速度很快,但数据量不到1亿就直接死机了,而且无法持久,每次重新加载,也不合理。于是就想到了redis。测试方法:1. 环境配置:机器用途配置数量...原创 2019-07-26 16:30:48 · 771 阅读 · 2 评论 -
Spark Worker: Failed to connect to master xxx:7077
用start-all.sh启动Spark,发现主节点的worker无法连接到Master,一直有错误显示:Worker: Failed to connect to master ubt-spk-m:7077仔细查看,我在spark-env.sh中设置的export SPARK_MASTER_HOST= 192.168.122.207错误显示的Master Host却是ubt-spk-m,...原创 2019-08-01 14:22:36 · 5046 阅读 · 0 评论 -
Cognos11报错:CM-CFG-5034, could not load driver "oracle.jdbc.OracleDriver"
Cognos11报错:CM-CFG-5034, could not load driver “oracle.jdbc.OracleDriver”解决办法:复制ojdbc.jar 到./analytics/drivers 目录下就可以原创 2019-09-18 08:22:30 · 287 阅读 · 0 评论