大数据
文章平均质量分 83
奶茶多冰三分糖
"比编程能力更重要的是持续学习"
展开
-
MySQL安装
1、一堆rpm包的集合 2、先解压了 3、将linux上自带的mysql-libs卸载掉,选择 y 4、完成后进到刚刚解压缩的目录下安装mysql, 依次安装rpm -ivh mysql-community-common-5.7.19-1.el7.x86_64.rpmrpm -ivh mysql-community-libs-5.7.19...原创 2018-04-17 15:12:10 · 288 阅读 · 0 评论 -
搭建HBase环境
HBase: 一个结构化数据的分布式存储系统,具体思想参考之前写的Google的三篇论文中的 BigTable 大表1、解压安装包到指定的文件夹中 2、设置环境变量vi ~/.bash_profileHBASE_HOME=/root/training/hbase-1.3.1export HBASE_HOMEPATH=$HBASE_HOME/bin:$PATHexport PATHsour...原创 2018-04-20 13:25:40 · 441 阅读 · 0 评论 -
Spark环境搭建
1、官网下载安装包再通过WinSCP传到服务器上,并解压 2、进入安装目录并修改配置文件 (1)spark-env.sh 的最后添加(配置信息顾名思义)export JAVA_HOME=/root/training/jdk1.8.0_144export SPARK_MASTER_HOST=bigdata11export SPARK_MASTER_PORT=7077 ...原创 2018-05-13 11:30:12 · 378 阅读 · 0 评论 -
Exception in thread "main" java.net.BindException: 无法指定被请求的地址: Service 'sparkMaster' failed 错误处理
1、搭建 Spark 的HA环境时报如下错误Spark Command: /root/training/jdk1.8.0_144/bin/java -cp /root/training/spark-2.1.0-bin-hadoop2.7/conf/:/root/training/spark-2.1.0-bin-hadoop2.7/jars/* -Xmx1g org.apache.spark.dep...原创 2018-05-13 13:40:47 · 3575 阅读 · 3 评论