BigData
文章平均质量分 88
大数据相关的开发学习积累
富有一文
书山有路勤为径,学海无涯苦作舟
展开
-
HiveSQL之datediff、date_add、date_sub详解及注意坑点
HiveSQL之datediff、date_add、date_sub详解及注意坑点原创 2023-06-27 19:34:29 · 4751 阅读 · 1 评论 -
Hadoop启动datanode/namenode失败或者无法启动
文章目录问题描述问题产生原因解决方法注:看有没有重要数据吧,但是一般频发格式化namenode时,应该也知道自己没啥重要数据,采取简单粗暴的方法吧问题描述当我使用./hdfs namenode -format 多次对文件系统进行格式化的时候,会出现datanode或者namenode无法启动的问题问题产生原因执行文件系统格式化时,会在namenode数据文件夹,即配置文件 hdfs-sit...原创 2020-03-31 16:45:37 · 730 阅读 · 0 评论 -
File file:/root/.flink/application_1585641509397_0005/lib/slf4j-log4j12-1.7.15.jar does not exist
文章目录问题出错报告问题点:问题出错报告Application application_1585641509397_0005 failed 1 times due to AM Container for appattempt_1585641509397_0005_000001 exited with exitCode: -1000For more detailed output, check...原创 2020-03-31 15:22:41 · 1880 阅读 · 4 评论 -
Yarn-Session集群启动失败:Unauthorized request to start container
文章目录问题报错出错点:Unauthorized request to start container解决方法:问题报错2020-03-31 18:29:28,992 ERROR org.apache.flink.yarn.cli.FlinkYarnSessionCli - Error while running the Flink Yarn session....原创 2020-03-31 14:29:23 · 1094 阅读 · 0 评论 -
大数据组件资源包(百度云盘分享,永久有效)
文章目录目前打包资源:资源链接:目前打包资源:CentOS-6.5-x86_64-minimal.isoflink-1.7.2-bin-hadoop26-scala_2.11.tgzhadoop-2.6.4.tar.gzjdk-8u191-linux-x64.tar.gzspark-2.3.4-bin-hadoop2.6.tgzVMware-workstation-full-12.5...原创 2020-03-30 14:50:30 · 1595 阅读 · 0 评论 -
超级详细超级简单助你搭建hadoop分布式集群
文章目录安装Centos6.5:Centos6.5虚拟机网络配置及克隆2台服务器安装java安装hadoop安装Centos6.5:点击链接进入查看安装Centos6.5全过程Centos6.5虚拟机网络配置及克隆2台服务器点击进入查看详细配置修改过程安装java将java压缩包解压:tar -zxvf jdk-8u191-linux-x64.tar.gz在/etc/profile...原创 2020-03-30 14:36:13 · 335 阅读 · 0 评论 -
Centos虚拟机网络配置(为安装大数据组件做准备)
文章目录修改网络当前ip信息:ifconfig -a查看虚拟机的网关:修改ifcfg-eth0:vi /etc/sysconfig/network-scripts/ifcfg-eth0重启网络服务: service network restart更改主机名称修改主机名和Ip的映射关闭防火墙做本地映射修改网络当前ip信息:ifconfig -a查看虚拟机的网关:记下当前的网关:192....原创 2020-03-28 15:18:54 · 292 阅读 · 0 评论 -
安装Centos6.5(为安装大数据组件做准备)
文章目录准备材料开始安装准备材料VMware-workstation-full-12.5.2-4638234.exeCentOS-6.5-x86_64-minimal.isoVMware12.5.2密钥:5A02H-AU243-TZJ49-GTC7K-3C61N开始安装之后就开启此虚拟机这样我们的Centos就安装好了...原创 2020-03-28 12:44:02 · 217 阅读 · 0 评论