hadoop
文章平均质量分 75
Danger_Life
工作记录,归纳,问题整理
展开
-
【麒麟系统安装HDP,报错处理】更新篇
麒麟kylin安装hdp 报错处理原创 2023-08-03 11:47:53 · 1309 阅读 · 0 评论 -
hive数据迁移(数据+元数据)
hive数据迁移(数据+元数据),一步到位原创 2022-10-12 10:43:58 · 1183 阅读 · 0 评论 -
读取hdfs文件,本地文件,包括:Excel/CSV/Log...等,以及fsDataInputStream = fileSystem.open(path)中文乱码
测试文本1234.logI Love ChinaI love my country沁园春北国风光,千里冰封,万里雪飘。望长城内外,惟余莽莽;大河上下,顿失滔滔。山舞银蛇,原驰蜡象,欲与天公试比高。须晴日,看红装素裹,分外妖娆。江山如此多娇,引无数英雄竞折腰。惜秦皇汉武,略输文采;唐宗宋祖,稍逊风骚。一代天骄,成吉思汗,只识弯弓射大雕。俱往矣,数风流人物,...原创 2019-12-11 18:14:38 · 972 阅读 · 0 评论 -
Unable to load native-hadoop library for your platform... using builtin-java classes where applicabl
Unable to load native-hadoop library for your platform… using builtin-java classes where applicabl下载一个编译好了的native:下载对应的版本1: http://dl.bintray.com/sequenceiq/sequenceiq-bin/或:hadoop-native-64-2.6.0...原创 2019-10-31 14:58:25 · 329 阅读 · 0 评论 -
Linux hadoop集群搭建包含免密登陆
开始配置之前理一下思路:hadoop集群的配置整体可以分为五步1. 修改各机器主机名2. 免密配置3. 配置其中一台机器jdk、hadoop环境变量 /etc/profile4. 修改hadoop对应的文件 本文修改了7个文件5. 复制profile、hadoop文件给其他机器时间同步命令行输入:yum install ntp 下载ntp插件 ,下载完成后 命令行输入:ntpda...原创 2019-10-29 15:59:14 · 382 阅读 · 0 评论 -
Windows下------安装配置Hadoop
hadoop 下载地址下载hadoop ,apache官网:https://archive.apache.org/dist/hadoop/common/ 下载解压下载hadooponwindows-master.zip 链接: https://pan.baidu.com/s/1KvX6uHk5KhiB2jO25EYeOA 提取码: 4vq8hadooponwindows-master 替...原创 2019-09-02 10:36:16 · 81 阅读 · 0 评论