- 博客(13)
- 资源 (7)
- 问答 (1)
- 收藏
- 关注
原创 linux shell 条件判断if else, if elif else....
linux shell 条件判断if else, if elif else....
2017-05-30 23:32:09 216831
原创 Spark运行程序异常信息: org.apache.spark.SparkException: Task not serializable 解决办法
Spark 运行程序异常信息: org.apache.spark.SparkException: Task not serializable 解决办法
2017-05-20 18:52:47 3213
原创 MapReduce编程练习(四),统计多个输入文件学生的平均成绩,
hadoop 练习 MapReduce编程练习(四),统计多个输入文件学生的平均成绩,
2017-05-19 10:54:04 5526
原创 eclipse下执行maprdeuc程序报错 java.lang.ClassNotFoundException
eclipse 下执行 maprdeuc程序报错 java.lang.ClassNotFoundException
2017-05-18 21:32:49 1147 4
原创 mapreduce编程练习(二)倒排索引 Combiner的使用以及练习
hadoop mapreduce编程 练习 倒排索引 Combiner的使用以及练习
2017-05-14 17:15:29 706 1
原创 Zookeeper+Kafka+Spark streaming单机整合开发
环境准备: ubuntu 开发环境: jdk 1.8 scala:2.11.0 spark 2.0 zookeeper 3.4.6 kafka 2.12-0.10.2.0整合:Zookeeper+Kafka+Spark streaming单机整合开发
2017-05-14 16:43:55 906
原创 学习笔记 Hadoop的job提交过程,shuffle过程以及HA机制的实现
一,在hadoop中的mapreduce的job提交过程比较繁琐,但掌握job的提交过程是我们进入深入学习的必要。 二,mapreduce的shuffle机制三,Hadoop的HA机制。
2017-05-04 22:38:16 484 1
原创 Hadoop伪分布式环境搭建+Ubuntu:16.04+hadoop-2.6.0
Hello,大家好 !下面就让我带大家一起来搭建hadoop伪分布式的环境吧!不足的地方请大家多交流。谢谢大家的支持 准备环境: 1, ubuntu系统,(我在16.04测试通过。其他版本请自行测试,可参考官方文档!) 2,最好有网 下面就让我们开始吧: 前期准备: 1,如果你安装 Ubuntu 的时候不是用的 “hadoop” 用户,那...
2017-05-02 10:51:48 2044 1
【请教】根据已有数据生成类似该数据分布的新数据
2020-08-22
TA创建的收藏夹 TA关注的收藏夹
TA关注的人