![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 62
徒步凉城-Jasper
代码一撸到底
展开
-
Hadoop集群安装
Hadoop集群安装机器如果只有3台主机,可以按照如下规划来部署安装 IP server hadoop1(172.16.185.68) zookeeper journalnode namenode zkfc resourcemanager datanode hadoop2(172.16.185.69) zookeeper ...原创 2018-07-27 11:27:56 · 252 阅读 · 0 评论 -
zookeeper集群安装
zookeeper集群安装机器 IP host 172.16.185.68 hadoop1 172.16.185.69 hadoop2 72.16.185.70 hadoop3上传zk安装包进入官网下载,当前使用 zookeeper-3.4.6.tar.gz 版本解压[hadoop@hadoop1 zo...原创 2018-07-27 11:25:51 · 177 阅读 · 0 评论 -
Elasticsearch集群安装
Elasticsearch集群安装在三台linux服务器上,集群安装ElasticSearch.6.2.2,及其es的插件,各种管理软件环境 域名 ip es1 10.131.44.254 es2 172.16.187.143 es3 172.16.185.62JDK三台机器都安装jdk最新版本[es@es...原创 2018-07-27 11:46:45 · 258 阅读 · 0 评论 -
Hbase集群安装
Hbase集群安装机器如果只有3台主机,可以按照如下规划来部署安装 IP host 172.16.185.68 hadoop1 172.16.185.69 hadoop2 72.16.185.70 hadoop3Hadoop集群安装Hbase依赖Hadoop,详见 Hadoop集群安装hbase安装...原创 2018-07-27 12:45:08 · 259 阅读 · 0 评论 -
Scala安装
Scala安装下载进入官网下载,当前使用 scala-2.12.3.tgz 版本解压tar -zxvf /data/software/scala-2.12.3.tgz -C /data/配置环境vi /etc/profileexport SCALA_HOME=/data/scala-2.12.3export PATH=$PATH:$SCALA_HO...原创 2018-07-27 12:47:52 · 185 阅读 · 0 评论 -
Spark集群安装
Spark集群安装机器如果只有3台主机,可以按照如下规划来部署安装 IP host 172.16.185.68 hadoop1 172.16.185.69 hadoop2 72.16.185.70 hadoop3Hadoop集群安装详见Hadoop集群安装Scala安装详见Scala安装下载进入...原创 2018-07-27 12:49:19 · 295 阅读 · 0 评论 -
Spark在Intellij IDEA中开发并运行
word count demo引入jar <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.1.0</version><原创 2018-11-18 13:40:19 · 2072 阅读 · 0 评论 -
详解HBase架构原理
原文来自:详解HBase架构原理什么是HBaseHBase是一个高可靠、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价的PC Server上搭建大规模结构化存储集群。HBase是Google BigTable的开源实现,与Google BigTable利用GFS作为其文件存储系统类似,HBase利用Hadoop HDFS作为其文件存储系统;Google运行MapRedu...转载 2019-03-15 09:03:45 · 349 阅读 · 0 评论 -
Flink集群运行问题小记
最近Flink项目中遇到一个问题,关于classloader的问题,在此小记一下问题直接抛运行异常日志把,很显眼的一句 You may be missing the 'flink-hadoop-compatibility' dependencyorg.apache.flink.client.program.ProgramInvocationException: The main method...原创 2019-06-04 11:53:24 · 4803 阅读 · 1 评论