- 博客(3)
- 资源 (4)
- 收藏
- 关注
原创 大数据新技术Cloud Dataflow-谷歌放弃使用MapReduce
在2014年的Google I/O大会上,Google宣布已经停用MapReduce,专项支持新的超大规模云分析系统,这都是Cloud Dataflow,Cloud Dataflow用于构建移动应用,调试、追踪和监控产品级云应用,它是一种构建、管理和优化复杂数据流水线的方法。它主要采用了Google内部的Flume和MillWhell技术,其中Flume用于数据的高效率并发处理,而M...
2018-11-09 15:43:09 808
原创 大数据相关概念-什么是算子
在流处理、交互式查询中有个常用的概念是“算子”,在英文中被成为“Operation”,在数学上可以解释为一个函数空间到函数空间上的映射O:X->X,其实就是一个处理单元,往往是指一个函数,在使用算子时往往会有输入和输出,算子则完成相应数据的转化,比如:Group、Sort等都是算子。 关注以下公众号“程序员的足迹”,免费下载高质量相关资料...
2018-11-09 15:42:32 21954
原创 大数据相关概念-什么是探针
探针 电信的探针技术数据获取。电信的很多数据产生于网络设备,主要是基于探针技术。从电信的路由器、交换机上把数据采集上来的专用设备是探针。探针分为内部探针和外部探针,内置探针是指探针设备和电信已有设备在同一个机框内,直接获取数据。外置探针是指在现网中大部分网络设备早已经部署完毕,无法移动原有网络,这是就需要外置探针。 关注以下公众号“程序员的足迹”,免费下载高质量...
2018-11-09 15:41:32 10530
Java从零到企业级电商项目实战
2019-09-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人