- 博客(3)
- 资源 (8)
- 收藏
- 关注
RSS订阅原创 初探Spark-使用大数据分析2000W行数据
初学spark和scala，做些小分析练习，学习资料可以看看这里 如何搭建scala环境和spark环境我就不说了，网上一堆堆的。开发环境 scala version：2.11.2 spark version：spark-2.0.0-bin-hadoop2.4 Eclipse：4.4.2 Juno Service Release 2本次实例是单机运行的，步骤如下： 1. 模拟2000W人口数据
2016-08-12 14:54:14
1723
原创 Protobuf协议的Java应用例子
Protobuf协议，全称：Protocol Buffer 它跟JSON，XML一样，是一个规定好的数据传播格式。不过，它的序列化和反序列化的效率太变态了…… 来看看几张图你就知道它有多变态。 Protobuf的Java实例一、 安装Protobuf去Protobuf的GitHub下载，解压。如果你是Windows环境，则还要下载多一个东西。protobuf-2.5.0-windows.zi
2016-08-03 15:20:27
57957
3
原创 Flume-ng在windows环境搭建并测试+log4j日志通过Flume输出到HDFS
首先，去Flume官网下载最新的版本 这里我使用的是apache-flume-1.6.0-bin.tar.gz 开发环境 系统：window7 Jdk：1.7 Flume：1.6.0 Hadoop:2.5.2 一、下载flume并解压安装配置 下载解压到你想要的目录 配置环境变量 新建FLUME_HOME变量，填写flume安装目录，如图 然后编辑系统变
2016-08-01 18:03:34
4984
java微信公众平台开发框架wx-tools
2017-03-10
dubbo+zookeeper实例
2017-01-12
wx-tools-2.0.0.jar
2016-12-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人