开源大数据周刊-第84期

最新推荐文章于 2024-09-11 14:10:29 发布

weixin_34232744

最新推荐文章于 2024-09-11 14:10:29 发布

阅读量123

点赞数

文章标签：大数据

原文链接：https://yq.aliyun.com/articles/590244

版权

资讯

[神策数据宣布获4400万美元融资](http://www.cbdio.com/BigData/2018-04/12/content_5702056.htm
)

4月11日，神策数据 C 轮融资发布会在北京举行。本轮融资由华平投资领投，红杉资本中国基金、DCM资本、襄禾资本、晨兴资本、线性资本、明势资本跟投，共计4400万美元。这标志着，神策数据成为国内用户行为分析领域，首家完成 C 轮融资的大数据公司。

贵阳高新区掀起发展大数据新热潮全力打造“中国数谷之心”

日前，记者从贵阳高新区获悉，该区将抢抓贵州坚定不移推进大数据战略行动向纵深发展的机遇，全力打造“中国数谷之心”，强化大数据发展要素集聚，加快大数据与实体经济的融合，推动大数据发展跃上新台阶。

[重庆携手阿里巴巴、蚂蚁金服签订14个项目推进大数据智能化](http://www.cbdio.com/BigData/2018-04/10/content_5701357.htm
)

4月9日，重庆市与阿里巴巴集团、蚂蚁金服集团在大数据智能化应用、科技金融和大数据人才培养等3大领域集中签订14个项目的合作协议。

技术

Apache Hadoop 3.1.0 正式发布，原生支持GPU和FPGA

4月6日，Apache Hadoop 3.1.0 正式发布了，Apache Hadoop 3.1.0 是2018年 Hadoop-3.x 系列的第一个小版本，并且带来了许多增强功能。不过需要注意的是，这个版本并不推荐在生产环境下使用，如果需要在正式环境下使用，请等待 3.1.1 或 3.1.2 版本。

[Apache Kylin在链家的实践](https://zhuanlan.zhihu.com/p/35219697
)

伴随链家业务线的拓宽和发展，以及数据生态的建设，数据规模快速增长。从2015年大数据部门成立至今，集群数据存储量为9PB，服务器规模为200台+。与此同时，数据需求也随着业务的发展落地不断增长，如统计分析、指标API、运营报表等，不同业务需求差异较大，维度越来越多，需要定制化开发。面对数十亿行级别的数据，低延迟响应的特性，保障服务稳定、数据准确，链家的数据分析引擎经历了如下的发展历程。

[HBase的MOB压缩分区策略介绍](https://mp.weixin.qq.com/s/5_4d7B9tn7NOWnMrtnluIQ
)

HBase中等对象（MOB---MediumObject）存储特性引入是源自社区HBASE-11339。对于中等大小的文档、图像等文件的存储（文件大小从100K到10MB），可降低读取延迟和写入访问时间[1]。通过分离文件的IO路径和MOB文件对象，对文件采取不同的压缩策略，从而减少由于HBase压缩造成的写入扩大。若一个表的MOB文件存储在MOB区域（MOB region）中，则意味着该区域中将存在大量的MOB文件。