hadoop
cts618
人工智能高级工程师
展开
-
hadoop启停脚本hdp.sh
hadoop启停脚本hdp.sh原创 2022-08-13 12:20:11 · 232 阅读 · 0 评论 -
hadoop配置文件workers
hadoop配置文件workers原创 2022-08-13 12:07:36 · 1518 阅读 · 0 评论 -
hadoop配置文件mapred-side.xml
hadoop配置文件mapred-side.xml原创 2022-08-13 12:06:01 · 141 阅读 · 0 评论 -
hadoop配置文件yarn-site.xml
hadoop配置文件yarn-site.xml原创 2022-08-13 12:05:06 · 1419 阅读 · 0 评论 -
hadoop配置文件hdfs-site.xml
hadoop配置文件hdfs-site.xml原创 2022-08-13 11:24:25 · 988 阅读 · 0 评论 -
hadoop配置文件core-site.xml
hadoop配置文件core-site.xml原创 2022-08-13 11:20:22 · 2045 阅读 · 0 评论 -
常识性问题
1.pdf请使用火狐浏览器打开(可以直接复制粘贴),使用乱七八糟pdf软件打开提示要密码的,我也不知道密码是啥2.百度网盘在线解压,提示需要解压密码?这是因为百度网盘网盘不识别某些文件导致的异常,下载到本地之后直接解压打开,不需要解压密码,这个是百度网盘的bug,不要误会网加密了3.下载的教程视频打不开,或者感觉有问题的,请使用potplayer播放器播放,一切正常4.某些浏览器打开百度网盘地址会出现小黄鸡,这种情况下不是网盘失效了,而是你浏览器的模式有问题,比如某些数字浏览器的极速模式,强原创 2021-08-26 10:42:58 · 582 阅读 · 0 评论 -
hdfs写数据流程
CLIENT(客户端):用来发起读写请求,并拆分文件成多个 Block; NAMENODE:全局的协调和把控所有的请求,提供 Block 存放在 DataNode 上的地址; DATANODE:负责数据的存储,可以有很多个;原创 2021-08-18 16:40:28 · 62 阅读 · 0 评论 -
Hadoop文件写入权限不足
在windows的idea中访问执行时,会向linux下的hadoop提交文件,可能会发生权限问题,原因是执行时,idea会将当前windows登陆用户做为hadoop用户来提交文件。因此会导致权限不足的问题解决办法 :在执行程序的Edit Configurations中 做如下设置,把VM options或Environment variables中加入-DHADOOP_USER_NAME=xxxxxx (你的hadoop用户)...原创 2021-05-26 06:13:47 · 1657 阅读 · 0 评论 -
IDEA中itar快捷键
for (int i = 0; i < array.length; i++) {= array[i]; }原创 2021-04-30 06:19:52 · 464 阅读 · 0 评论 -
win10中ctrl+space快捷键不起作用的问题
win10中默认的ctrl+space为切换中英文,这与很多IDE中的提示代码快捷键冲突,所以需要进行修改。注:仅仅在控制面板中修改快捷键是不行的,每次重启就会恢复。步骤1:按win+R打开运行页面,输入regedit(注册表页面),进入如图1所示页面。依次进入HKEY_CURRENT_USER/Control Panel/Input Method/Hot Keys右侧显示表中有:将Key Modifiers 中开头的02改为00将Virtual Key 中开头的20改为ff用户注销即可原创 2021-03-11 13:03:02 · 2311 阅读 · 1 评论 -
把CentOS6.8的iso文件挂载到CentOS6.5的镜像源
1, 上传iso文件到/opt (一定要确保这个ISO文件上传完毕后再进行下面的操作)查看iso文件:2, 创建挂载目录mkdir /media/CentOS73, 挂载iso文件mount -t iso9660 -o loop /opt/CentOS-7-x86_64-DVD-1511_7.2.iso /media/CentOS7/4 设置开机自动挂载光盘镜像(这一步可操作,也可不操作),执行vi /etc/fstab(fstab 输入错误会使主机无法正常启动而进入emergen原创 2021-02-26 08:21:26 · 658 阅读 · 0 评论 -
CentOS 更新yum源及yum命令详解
CentOS 更新yum源什么是repo文件? repo 文件是 Linux 中yum源(软件仓库)的配置文件,通常一个 repo 文件定义了一个或者多个软件仓库的细节内容,例如我们将从哪里下载需要安装或者升级的软件包,repo文件中的设置内容将被yum读取和应用!1、做好备份,为了更新失败时切换回去mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup有多个时通过下面命令备份mv /et原创 2021-02-26 08:36:04 · 1042 阅读 · 0 评论 -
namenode: Unknown command
hadoop格式化命令:bin/hdfs namenode -formatbin/hadoop namenode -formader原创 2019-11-26 17:31:02 · 568 阅读 · 0 评论
分享