![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据库环境
hao_wujing
这个作者很懒,什么都没留下…
展开
-
[Err]1114 The table 'xxx' is full 的解决办法
更改表空间大小vim /etc/my.cnf设置tmp_table_size=1024Mmax_heap_table_size=1024M重启mysql服务service mysql restart原创 2019-12-25 15:20:24 · 2426 阅读 · 0 评论 -
CENTOS7.5-hadoop安装 --Linux上安装Hadoop集群(CentOS7+hadoop-2.8.0)-报错
[root@hserver1 sbin]# ./start-all.shThis script is Deprecated. Instead use start-dfs.sh and start-yarn.shStarting namenodes on [hserver1]hserver1: starting namenode, logging to /opt/hadoop/hadoo...原创 2019-03-05 14:51:15 · 579 阅读 · 0 评论 -
CENTOS7.5配置SSH免密码登录
1.修改/etc/hosts文件2.使用ping命令查看是否能够ping的通,然后安装和启动ssh协议3.master机器上生成密码对,这里生成的是无密码秘钥对。4.把id_rsa.pub追加到授权的key里面去5.修改文件"authorized_keys"权限(非常重要)6.修改SSH配置文件"/etc/ssh/sshd_config"的内容。...原创 2019-03-05 10:37:26 · 1176 阅读 · 0 评论 -
hadoop集群上时间同步
集群上时间同步:sudo ntpdate time.nist.govhadoop开源软件,可靠的、分布式、可伸缩的。大数据去IOEIBM //ibm小型机.Oracle //oracle数据库服务器 RACEMC //EMC共享存储设备。Cluster集群。1T = 1024G 1P = 1024T 1E =...原创 2019-03-05 16:15:58 · 324 阅读 · 0 评论 -
CENTOS7.5安装hadoop2.8
CENTOS7.5安装hadoop2.81下载hadoop2安装3个虚拟机并实现ssh免密码登录 2.1安装3个机器 2.2检查机器名称 2.3修改/etc/hosts文件 2.4 给3个机器生成秘钥文件 2.5 在hserver1上创建authorized_keys文件 2....原创 2019-03-05 16:23:20 · 341 阅读 · 0 评论 -
大数据-Linux
1、HDFS界面:http://potter2:50070查看NameNode状态;该端口的定义位于core-default.xml中,可以在hdfs-site.xml中修改;如果通过该端口看着这个页面,以为着NameNode节点是存活的。1、HDFS页面:500702、YARN的管理界面:80883、HistoryServer的管理界面:198884、Zookee...原创 2019-03-05 17:06:25 · 204 阅读 · 0 评论 -
hadoop-手把手教你搭建Hadoop全分布式集群
阅读目录(Content)一、搭建Hadoop全分布式集群前提 1.1、网络 1.2、安装jdk 1.3、安装hadoop 二、Hadoop全分布式集群搭建的配置 2.1、hadoop-env.sh 2.2、core-site.xml 2.3、hdfs-site.xml 2.4.mapred-site.xml 2.5、yarn-site...原创 2019-03-07 14:46:23 · 211 阅读 · 0 评论 -
集群上时间同步
集群上时间同步:sudo ntpdate time.nist.govhadoop开源软件,可靠的、分布式、可伸缩的。大数据去IOEIBM //ibm小型机.Oracle //oracle数据库服务器 RACEMC //EMC共享存储设备。Cluster集群。1T = 1024G 1P = 1024T 1E =...原创 2019-03-20 17:15:26 · 205 阅读 · 0 评论 -
hadoop-web-常用端口和服务
http://Master:8088 查看集群状态(需要先启动yarn)http://Master:50070 查看HDFS系统(适用于2.x版本,1.x版本好像是50030)http://Master:19888 查看JobHistory(需要先启动jobHistoryserver,执行mr-jobhistory-daemon.sh start historyserver可以启动...原创 2019-03-08 10:59:56 · 2837 阅读 · 0 评论