自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 启动hadoop,datanode节点启动失败:Initialization failed for Block pool.......

总结来说如果不删除数据和日志的话,重新格式化namenode会产生新的集群ID,这样会和datanode的集群ID产生冲突,导致namenode启动失败。其次每次的namenode format都会重新创建一个namenodeId,而data目录下则包含了上次format时的id , namenode ,format。清空了namenode下的数据,但是没有清空datanode下的数据,导致启动时失败,所以要做的就是每次fotmat前,清空data下的所有目录(这是最保证的方法)

2023-10-16 23:38:15 589 1

原创 flume安装和环境部署,并测试flume监控文件成功

安装flume以及配置conf文件里的要点概述,理解三种组件的用法

2023-10-13 21:35:06 444

原创 安装hive中初始化元数据库失败,显示Failed to get schema version

起初没有想通,认真看了一下发现password的密码可能有两种情况,一种是我配置mysql文件的密码也有可能是我虚拟机主机的密码,在想一下问题的解释,告诉我的是root用户密码拒绝我的服务访问,所以我试着修改成我的root机子的密码,于是就可以了。在网上找了几种方法都没解决成功,然后我又重新看了一下问题,问题当中还显示了:无法使用MySQL以‘root‘@‘localhost‘。查看了版本是正确的,所以不是这个问题,只能是密码问题,然后我查看了一下配置文件。2、密码问题:当密码错误时,服务器拒绝访问。

2023-10-12 22:39:58 2981

原创 带你理解Hadoop中HDFS,是什么?常用命令的使用

DataNode——是hd fs中真正存储数据的地方 ,在NameNode的指令下执行快的创建 删除和复制 并且汇报数据快信息。# hadoop fs -cp /HDFS系统下的文件夹路径 (一个空格) /复制到的文件路径。# hadoops fs -put 本地当前目录文件 名/HDFS系统下的文件夹名。# hadoop fs -cat /想查看的HDFS系统下的文件夹路径。# hadoop fs -rm /HDFS系统下的文件夹名。NameNode——是hdfs中存储元数据的地方。

2023-10-05 10:03:31 250

原创 Python大放送,快速理解Python实战练习题

2、快速掌握移除元素的逻辑3、快速理解去重元素的两种方式和简单排序Python:1 大环境下现在Python已经成为了每一个必须项目,Python说简单也不简单主要是掌握其中的编程逻辑也简单,可以用于爬虫,可视化。不会的可以通过cmd下先安装Python环境下载pycharm即可2 Python的文件类型分为3种,即源代码、字节代码和优化代码。这些都可以直接运行,不需要进行编译或连接。实战例子,只要熟悉逻辑一切都迎刃而解。

2023-10-05 10:03:19 24

原创 xshell下载jdk版本,配置Java环境的详程

—虚拟机可下载多台,网上可直接解压安装包即可安装,主要是环境一出现错误。下面是一顺到底的详细环境配置。

2023-09-24 12:11:17 401 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除