计算机大数据
文章平均质量分 64
不秃头小陈同学
男
展开
-
如何Linux命令删除HDFS上的文件(学习笔记2)
今天终于完成了Hadoop作业过程真的不容易!!给大家做个干货,这些知识点要掌握!我今天在一个视频上看到一个老师讲的,真不错。某小破站 如何删除hdfs上的文件,不需要API操作哦!!1、查看文件夹hadoop fs -ls2、如果要递归查询文件夹hadoop fs -ls -R3、从根目录查看所有内容hadoop fs -ls -R /4、不想要递归查看hadoop fs -ls /5、删除指定目录里面的文件hadoop fs -rm /单个文件路原创 2021-12-06 22:07:21 · 9509 阅读 · 0 评论 -
Hive的安装(超详细)
Hive的安装模式嵌入模式:使用内嵌的 Derby数据库存储元数据,这种方式是Hive的默认安装方式,配置简单,但是一次只能连接一个客户端,适合用来测试,不适合生产环境。本地模式:采用外部数据库存储元数据,该模式不需要单独开启Metastore服务,因为本地模式使用的是和Hive在同一个进程中的Metastore服务。远程模式:与本地模式一样,远程模式也是采用外部数据库存储元数据。原创 2021-11-23 21:02:20 · 8208 阅读 · 0 评论 -
大数据Hadoop HBase Zookeeper进程“懒人”启动关闭代码(学习笔记)
最近一直在上课,然后在备考教资、还有其他大大小小的琐事,今天来更新一篇学习笔记吧!以下关于大数据Hadoop、HBase、Zookeeper进程启动和关闭的命令很重要哦!要重点把它们牢记,有一点要强调的是,路径有些不同,在下载文件以及解压文件的时候,要有一个随时做备忘的好习惯,把路径记下来,当然如果能记住最好了,按笔者的情况,偏向于喜欢把它们记下来,纵使自己有过于常人的记忆力,但是“好记忆不如烂笔头”!Hadoop进程启动打开虚拟机,三台虚拟机都要同时打开。执行以下步骤:笔者 Hadoo..原创 2021-11-03 09:07:05 · 633 阅读 · 1 评论 -
Zookeeper在正常配置下启动成功,但是在查看状态时仍然会报错的解决方法(超级详细保姆级讲解)
Zookeeper对于不管是刚接触Hadoop和Hbase技术的小伙伴亦或是深耕于计算机行业的大牛一点都不陌生。众所周知, ZooKeeper 是一个分布式的,开放源码的分布式应用程序协调服务,是Hadoop和Hbase的重要组件。不知道大家会不会跟笔者一样在安装Zookeeper时会遇到这样的一个问题,笔者通过上网查阅相关资料发现没有合适的解决方法,于是通过自己尝试,最后解决了这个问题。看到身边部分小伙伴也会出现这个问题,笔者通过自己的方法帮助他们解决了问题。写这篇文章,希望能够做个总结,帮助与笔者因..原创 2021-09-24 18:16:05 · 8474 阅读 · 4 评论