大数据
itbs
这个作者很懒,什么都没留下…
展开
-
在CentOS配置HBase
操作系统:CentOS 7.2 软件包:HBase 1.2.4一、修改配置文件1、hbase-env.sh 配置JAVA_HOME 2、hbase-site.xml<property> <name>hbase.rootdir</name> <value>hdfs://127.0.0.1:8020/hbase</value></property><property>原创 2017-03-20 19:49:40 · 508 阅读 · 0 评论 -
在CentOS下配置Hadoop
操作系统:CentOS 7.2 软件包:Hadoop 2.7.2 一、修改hadoop配置文件 以下配置文件所在文件夹 /hadoop-2.7/etc/hadoop/1、hadoop-env.sh 配置JAVA_HOME export JAVA_HOME=/usr/java 2、core-site.xml配置hdfs,下面内容放在标签中 <property> <na原创 2017-03-20 15:45:08 · 294 阅读 · 0 评论 -
各种应用软件服务端口
Hadoop:50070:HDFS WEB UI端口8020 : 高可用的HDFS RPC端口9000 : 非高可用的HDFS RPC端口8088 : Yarn 的WEB UI 接口8485 : JournalNode 的RPC端口8019 : ZKFC端口Zookeeper:2181 : 客户端连接zookeeper的端口2888 : zookeeper集群内通讯使用,Lead...转载 2019-01-21 15:17:44 · 1316 阅读 · 0 评论 -
spark写入mysql的几种方法
方法一:各个字段都是提前定好的val prop = new java.util.Propertiesprop.setProperty(&quot;user&quot;, &quot;root&quot;)prop.setProperty(&quot;password&quot;, &quot;123456&quot;)df1.write.mode(SaveMod转载 2019-02-11 13:55:01 · 17990 阅读 · 0 评论 -
HBase单机配置
操作系统:CentOS 7.2应用软件:HBase 2.1.21、上传jdk和hbase,解压缩,修改文件夹名称,最终效果是在/opt路径下有两个文件夹jdk1.8和hbase2.12、修改系统配置文件 /etc/profile,设置JAVA_HOME和HBASE_HOME,设置PATH路径export JAVA_HOME=/opt/jdk1.8export HBASE_HOME=/o...原创 2019-02-12 16:50:46 · 314 阅读 · 0 评论