Same Yeu-CSDN博客

原创解决ubuntu16.04版本的hadoop无法访问web的8088和8020端口

问题：启动完hadoop能打开50070端口web，但不能进入8088端口和8020端口。这个问题应该只出现在ubuntu16.04版的，在18.04版本里是没有的先去50070端口web看这里如果是红框里没有内容的，回到主节点关闭hadoop：1.先把参与hadoop运行的节点都关闭防火墙，sudo ufw disable再查看防火墙状态，如果状态为“inactive（不活动）”，说明防火墙已关闭sudo ufw status2.去/etc/hosts里，把 127.0.1.1 X

2020-05-22 23:04:22 1289

原创系列1 CentOS7 安装hadoop前准备

CentOS版本：7.5.18041.先定义各节点的IP主机名IP信息master192.168.2.150slave1192.168.2.151slave2192.168.2.1522.准备刚安装完的最小安装CentOS开始3.设置静态IPvi /etc/sysconfig/network-scripts/ifcfg-ens33把BOOTPROTO的dhcp改为static（动态改为静态）把ONBOOT的no改为yes剩下添加的为IPADDR

2020-05-15 12:18:08 375

原创 CentOS下查看文件夹大小

用du -h --max-depth=深度 /XXX/XXX...具体用法参考博客：https://yq.aliyun.com/articles/66840

2020-01-10 00:38:35 3399

翻译翻译 - Ambari平台添加MongoDB Cluster模块（已验证成功安装）

以下文档是在GitHub发表的另一篇在ambari安装MongoDB，用谷歌翻译原文档，有注()的内容是我自己实践的注意事项。原文档：https://github.com/nikunjness/mongo-ambari适用于MongoDB的Ambari堆栈Ambari堆栈可轻松在HDP集群上安装和管理Mongo DB###假设Ambari已安装并正在运行。如果没有，您可以使用Horton...

2020-01-09 23:35:22 536 1

翻译翻译 - Ambari平台添加MongoDB Cluster模块（参考）

文档谷歌翻译：https://github.com/cas-packone/ambari-mongodb-clusterMongoDB集群的Ambari堆栈Ambari堆栈，用于在HDP群集上轻松安装和管理MongoDB，群集包括分片，副本，配置，mongos。 http://www.bigdatalab.top/archives/180＃＃＃＃特征自动安装mongodb集群，包括shar...

2020-01-09 16:33:13 640 1

原创 Ambari安装Hive组件

1.建新目录/path/to/mysql/，mkdir -p /path/to/mysql2.把之前用于安装Ambari所需要的MySQL JDBC驱动jar包放在新目录里，名称改为mysql-connector-java.jar；如果是用Linux的命令来在线安装JDBC驱动(ubuntu的apt-get install或centos的yum install)的，下载的驱动jar包是位于/us...

2020-01-06 01:15:09 3417

原创 CentOS7设置远程连接MariaDB

1.首先进入MySQLmysql -uroot -p2.然后添加用户远程访问权限MariaDB [(none)]> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'Password';注：root是登陆数据库的用户，Password是登陆数据库的密码，*就是意味着任何来源任何主机3.然后刷新使之生效FLUSH PRI...

2020-01-05 21:00:58 1154

原创 ambari平台的NameNode Last Checkpoint（HDFS上一次检查点异常分析）错误

1.ambari平台出现这个报错点开来具体查看发现Active NameNode和Stanby NameNode都有上一次检查点的告警。2.解决方法是要我们手动保存一次HDFS的检查点ubuntu系统：输入以下命令sudo -u hdfs hdfs dfsadmin -safemode entersudo -u hdfs hdfs dfsadmin -saveNamespacesudo...

2020-01-05 11:56:06 2716 1

原创 Centos7的MySQL和hive安装

MySQL1.因为centos7内部源没有mysql-server的，所以要从官网下载MySQL的安装资料库添加到内部源wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm2.然后安装yum -y install mysql57-community-release-el7-10.noar...

2019-12-29 00:07:09 362

原创 jdk1.8 + MySQL 8.0 + Tomcat 9 的eclipse编程jsp连接数据库数据输出到网页的问题解决

用eclipse来编写jsp来输出MySQL里的数据到自己搭建的网页，如果出现运行jsp没有报错但输出的网页没有内容显示（也就是一片空白）的，可以按以下顺序来排除问题我这次使用的软件、组件版本如下：jre(jdk)1.8.0_191Tomcat 9.0Eclipse IDE 2019-12MySQL 8.0.16mysql-connector-java-8.0.12.jar（换8.0...

2019-12-25 23:36:23 959

原创 Ambari安装包下载网页

https://docs.cloudera.com/HDPDocuments/Ambari-2.6.0.0/bk_ambari-installation/content/hdp_26_repositories.htmlhttps://docs.cloudera.com/HDPDocuments/Ambari-2.6.0.0/bk_ambari-installation/content/ambar...

2019-12-08 21:09:03 1940

原创 sqoop导入hive表报错解决Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is ..

sqoop导入hive表，如报以下的错误19/12/06 00:09:41 ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly.19/12/06 00:09:41 ERROR tool.ImportTool: Im...

2019-12-06 01:28:53 489 2

原创 Flume安装及部署

参考文档：https://cloud.tencent.com/developer/article/1474200注：配置环境变量可在~/.bashrc里添加

2019-12-05 13:07:09 101

原创 hadoop的Pig DUMP运行中出现的异常、运行过久

参考：https://www.jianshu.com/p/0f3b5231a19c原参考里是改**/hadoop的安装文件夹/etc/hadoop/map-site.xml**的，而在我的节点下hadoop文件夹下没有map-site.xml的，但有个是mapred-site.xml的。有map-site.xml的就改map-site.xml，没有map-site.xml但有mapred-sit...

2019-11-29 10:40:40 476

原创 Ubuntu18.04 MySQL+hive安装

Ubuntu18.04 Mysql+hive安装参考：https://blog.csdn.net/chengyuqiang/article/details/76757602https://www.jb51.net/article/172456.htmhttps://blog.csdn.net/qq_41822647/article/details/845038691.hadoop搭建推...

2019-11-08 12:57:23 819

weixin_43943841的博客