- 博客(21)
- 收藏
- 关注
RSS订阅转载 转：CDH--彻底解决问题----时钟异常
第 1 章. NTP服务器安装及客户机配置配置之前要确定时间和现实时间一致，手动配置时间命令sudo date -s “2018-04-18 14:50:02”配置时区https://www.cnblogs.com/dyj0201/p/6440632.html如果已有NTP服务器，则使用已有NTP服务器，不使用集群内部重新搭建的NTP服务器。已有NTP服务器地址为：10.131.11.48...
2019-06-28 16:11:22
1136
转载 大数据学习之-NN，SNN和DN的作用
NameNode(名称节点，简称NN)作用：文件系统命名空间，维护文件系统目录树存储文件名称，文件目录结构，文件属性（权限，大小，创建时间，副本数及大小…）,文件对应的数据块及这些块所对应的数据节点，我们称为blockmap，这种映射关系存储在NN中，但是并不会持久化这种关系，这个映射关系由DN在启动的时候上报给NN。以上关系由fsimage+editslog来存储。DataNode...
2019-06-28 15:27:05
2939
转载 CDH安装时出现的坑
一、mysql修改简单密码 mysql> set password = password(‘1234’);#设置密码报错：ERROR 1819 (HY000): Your password does not satisfy the current policy requirements首先，修改validate_password_policy参数的值mysql>...
2019-06-13 21:51:26
958
1
转载 CDH安装错误集锦
CDH安装过程中出现的错误1、iptables: /sbin/iptables 不存在我是因为误删将 /sbin/下的文件删除了。解决方法： yum install iptables2、com.mysql.jdbc.execptions.jdbc4.CommunicationsException:Communication link failure连接MySQL 的驱动包找不到。解决方...
2019-06-13 21:27:30
960
1
转载 CDH安装失败了，如何重新安装
CDH安装失败了，如何重新安装1> 删除Agent节点的UUID # rm -rf /opt/cm-5.4.7/lib/cloudera-scm-agent/*2> 清空主节点CM数据库 进入主节点的Mysql数据库，然后drop database cm;3> 删除Agent节点namenode和datanode节点信息 # rm -rf /opt/dfs/...
2019-06-13 21:21:46
1343
原创 CDH 初始化数据库 报错ERROR Exception when creating/dropping database with user 'root' and jdbc url 'jdbc:mys
初始化报该错CDH 初始化数据库 报错ERROR Exception when creating/dropping database with user ‘root’ and jdbc url ‘jdbc:mysql://localhost/?useUnicode=true&characterEncoding=UTF-8’，原因是没有该用户，无法创建。初始化命令格式：解决方法：进到m...
2019-06-13 14:11:16
5387
7
转载 Hadoop开启、关闭调试信息方法
Hadoop开启关闭调试信息开启：export HADOOP_ROOT_LOGGER=DEBUG,console关闭：export HADOOP_ROOT_LOGGER=INFO,console实时查看和修改Hadoop日志级别Hadoop的日志界面可以通过Hadoop命令和Web界面来修改。Hadoop命令格式：hadoop daemonlog -getlevel host:port...
2019-05-07 18:18:16
571
原创 mysql5.7修改用户密码 报错ERROR 1054 (42S22): Unknown column 'password' in 'field list'解决办法
mysql> update user set password=password(新密码‘) where user=”用户名”;执行后报错 ERROR 1054(42S22) Unknown column ‘password’ in ‘field list’错误的原因是 5.7版本下的mysql数据库下已经没有password这个字段了，password字段改成了authenticat...
2019-04-19 16:06:45
355
转载 解决Can 't connect to local MySQL server through socket '/tmp/mysql.sock '(2) ";
可以用命令：find / -name mysql.sock这条命令，并且能查到结果的话，只需将查到的结果做一个软连接到/tmp目录下即可解决。在这之前，需要明白mysql.sock这个文件有什么用？连接localhost通常通过一个Unix域套接字文件进行，一般是/tmp/mysql.sock。如果套接字文件被删除了，本地客户就不能连接。这可能发生在你的系统运行一个cron任务删除了/tm...
2018-11-19 15:07:24
3235
转载 MySQL提示:The server quit without updating PID file问题的解决办法
今天网站web页面提交内容到数据库，发现出错了，一直提交不了，数找了下原因，发现数据写不进去！第一反应，重启mysql数据库，一直执行中，停止不了也启动不了，直觉告诉我磁盘满了用df命令查了下，果然磁盘满了，因为当时分区采用系统默认，不知道为什么不能自动扩容！以后在处理这个问题！如图所示：123456789[root@snsgou ~]# df文件系统 ...
2018-11-16 15:22:22
394
转载 《hadoop学习》关于hdfs中的core-site.xml,hdfs-site.xml,mapred-site.xml文件配置详解
配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有两个方法:1.选择相应版本的hadoop,下载解压后，搜索*.xml,找到core-default.xml,hdfs...
2018-11-13 11:44:09
633
原创 初识hadoop
Hadoop:广义：以hadoop软件为主的生态圈狭义：hadoop软件Hadoop软件网站Hadoop.Apache.orgHive.apache.orgSpark.apache.orgFlink.apache.org上课主要讲hadoop软件：xx 生产多用x 因为新版本用的不多，除非是大公司Hadoop2.x版本的组成分以下三大块Hdfs：存储大数据量的数...
2018-11-13 11:42:45
92
1
原创 mysql语句学习二
子表例子：Select t.* from(selectDeptno,job,sum(sal) as sum_salFrom empGroup by deptno,job) as tWhere t.sum_asl >3000括号中的select查询的结果as t后表示把这个查询到的结果别名成t的子表括号外面的select这个t子表 where sum_asl这个别名条件，因为...
2018-11-12 23:16:41
123
原创 mysql知识学习一
数据类型Char 字符，定长，例如：如果是10个字节，只存了ABC，后面7个会用空格补上 Varchar 字符串 变长 例如：如果是10个字节，ABC，就只存3个字节Int 整数Float 单精度Double 双精度，例如：小数位后面比较精确Date 日期，指的是年月日Timestamp 指的是 年月日 时分秒Blob 二进制，存视频，图片之类Text 长文本，例如填写一个文...
2018-11-09 00:37:58
133
转载 mysql错误总结-ERROR 1067 (42000): Invalid default value for TIMESTAMP
ERROR 1067 (42000): Invalid default value for ‘FAILD_TIME’ （对TIMESTAMP 类型的子段如果不设置缺省值或没有标志not null时候在创建表时会报这个错误）这是因为sql_mode中的NO_ZEROR_DATE导制的，在strict mode中不允许’0000-00-00’作为合法日期使用下面的命令查看sql_mode...
2018-11-09 00:35:39
3533
原创 Centos7安装mysql（二进制）
1，将tar包从本地上传到linux2，检查系统是否有自带的Mariadb，如果有就删除，删除完再用第一个rpm命令查看3，查看系统是否有自带mysql，如有就删除，并且查看和删除/etc下的my.cnf文件4，解压mysql TAR包，安装路径/usr/local，并将目录改名为mysql5，添加用户和用户组创建组：groupadd mysqladmin创建用户并加入该组：u...
2018-09-26 18:00:09
1007
原创 虚拟机CentOS7安装JDK1.8
1，用rz命令从本地双穿JDK tar安装包2，在/usr目录下创建java目录，并解压JDK tar包3，cd到/usr/java目录下看到解压的jdk目录4，进入该目录，用pwd查看当前所在位置，并复制该路径，用于稍后配置环境变量配置文件5，用vim配置/etc/profile文件，使用shift+G到该文件最后加上以下截图红色框框内容，编辑好在按esc使用wq或者x保存6...
2018-09-26 12:26:27
2350
原创 shell下配置VM centos7静态IP
1.用root用户登录系统 2.输入dhclient自动获取IP 3.查看IP 4.测试是否可以ping公网 5.配置静态IP 6.重启网卡并测试是否连接外网
2018-09-12 16:34:49
113
原创 VM安装Centos7
1.点击启动此虚拟机 2.启动安装系统 3.安装中 4.选择时间和安装 5.选择安装位置 6.选择自定义 7.配置分区 8.格式化分好的区 9.Kdump 是检测新硬件的进程，不启动问题不大 10.开始安装 ...
2018-09-12 15:42:26
473
原创 配置VM12虚拟机
1.新建虚拟机 2.选择自定义 3选择默认，然后下一步 4.选择“稍后安装操作系统” 5.系统选择linux，版本选择Centos7 6.给虚拟机起名字和位置，因人而异 7.配置虚拟机CPU核数 8.配置虚拟机内存 9.选择虚拟机使用网络，根据实际情况而定 10.保持默认 11.下一步，再次保持默认 12.创建虚拟磁盘 13....
2018-09-12 14:21:17
2006
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人