![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop学习笔记
曹向前
众生皆苦
展开
-
Hadoop完全分布式安装,仅供学习测试
Hadoop完全分布式安装,仅供学习测试Hadoop版本:hadoop-2.6.0-cdh5.13.1 http://archive.cloudera.com/cdh5/cdh/5/安装环境,使用 VMware虚拟三台虚拟机,并安装Java环境:CentOS Linux release 7.4.1708 (Core) Linux hadoop1 3.10.0-693.5.2.原创 2018-01-21 18:28:03 · 257 阅读 · 0 评论 -
Maven构建spark工程,scala和java混合编码
新建普通java maven工程,修改pom文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schema...原创 2018-08-28 20:21:34 · 424 阅读 · 0 评论 -
caused by: java.lang.NoSuchMethodError: com.fasterxml.jackson.core.JsonFactory.requiresPropertyOrder
18/08/28 22:02:35 ERROR MetricsSystem: Sink class org.apache.spark.metrics.sink.MetricsServlet cannot be instantiated18/08/28 22:02:35 ERROR SparkContext: Error initializing SparkContext.java.lang.r...原创 2018-08-28 22:12:27 · 2292 阅读 · 0 评论 -
mapreduce实现读取hbase表数据保存到hdfs
mapreduce实现读取hbase表数据保存到hdfs参考资料 https://hbase.apache.org/book.html#mapreduce.exampleimport java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;imp...原创 2019-01-09 20:52:36 · 1624 阅读 · 0 评论