- 博客(2)
- 资源 (2)
- 收藏
- 关注
原创 Hadoop环境编程-Configuration类的使用
程序开发中,经常需要将程序执行中的相关参数进行可配置化,以实现程序的灵活性。在Hadoop环境下编程,也有同样的需求。本文介绍在MapReduce编程中,怎样使用Configuration类读取相关配置。这些配置可能不仅仅在Job配置时需要,有些配置还要在Map或者Reduce编程间传递。
2017-10-29 10:08:26 2677
原创 Spark安装与入门使用
Spark是一个通用的大规模数据快速处理引擎,一个大数据分布式处理框架。Spark之所以能被迅速的应用到各种大数据处理场景下,与其为Batching processing,Streaming Processing,Ad-hoc Query等三大大数据处理问题提供了近乎完美的解决方案息息相关。
2017-10-15 10:09:30 490
ZeroMQ:云时代极速消息通信库
2018-06-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人