![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 79
浩海紫冰
c爱好者。时间
展开
-
hive 安装步骤以及问题解决方案
1.安装hive2.启动hive1. 先启动hadoop 见hadoop 文档2.常见操作步骤3.报错1.比较难解决的问题 是最后运行schematool -dbType mysql -initSchema 初始化hive时候报Unable to load authentication plugin 'caching_sha2_password'.schematool -dbType mysql -initSchemaSLF4J: Class path conta...原创 2021-02-10 16:33:59 · 1557 阅读 · 0 评论 -
安装hadoop 问题记录
1.安装hadoop 报错目录1.安装hadoop 报错2.hadoop 实例运行3.总结1.启动bin/hdfs namenode -format 命令后包如下错误 SHUTDOWN_MSG: Shutting down NameNode at huwei.local/192.168.1.1002021-01-24 00:09:11,446 INFO common.Storage: Storage directory /usr/local/Cellar/hadoop/3...原创 2021-01-24 19:31:34 · 1588 阅读 · 0 评论 -
mac ssh 免密登录 localhost
1.背景最近在自己笔记本上安装hive,在启动hadoop时候会报错提示macbook-pro.local: Permission denied (publickey,password,keyboard-interactive).是因为mac上ssh没有免密登录导致,因此需要在本机上解决免密ssh 登录localhost 问题,在翻阅了无数博客后,都没有结果,最后在两篇博客上结合起来找到了办法,记录一下.用到以下连篇文章上的内容.1.https://blog.csdn.net/CYJ2014go/a原创 2021-01-23 14:43:45 · 509 阅读 · 1 评论 -
Mapreduce 教程-翻译
Mapreduce 教程--大数据基本功一.mapreduce概念mapreduce定义:是hadoop的处理层,将整个任务拆分成各个独立的子任务并行处理的大规模数据编程模型。整个任务被用户提交到master主节点上然后被拆分成子任务并分配给各个从节点。mapreduce编程模型是函数式构造的类型风格。1.1了解mapreduce了解hadoop的mapreduce从以下几个问题入手,hadoop看起来像什么,what,why and mapreduce 怎样工作...原创 2020-07-27 00:38:33 · 355 阅读 · 0 评论