hadoop
Cribug8080
这个作者很懒,什么都没留下…
展开
-
Mac 安装 hadoop
配置 ssh localhost(免密登录)Mac OS X只需在 系统偏好设置–>共享–>远程登录 勾选就可以使用ssh了ssh免密设置:终端输入ssh-keygen -t rsa -P "" #直接enter yescat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys# 然后验证ssh localhost# ...原创 2019-05-08 11:46:36 · 217 阅读 · 0 评论 -
hive 安装
hive 安装下载地址apache-hive-x.y.z-bin.tar.gz。选择版本。本文中的x.y.z代表hive的某个版本例如3.1.1下载->解压->复制到/usr/local/hivewget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.1/apache-hive-x.y.z-bin.tar....原创 2019-05-30 10:48:52 · 137 阅读 · 0 评论 -
sqoop mysql到HDFS
Hadoop3版本可以用sqoop1参考地址问题:ClassNotFoundException class 表名 not found配置中需要添加--bindir ./,sqoop import --bindir ./ --connect jdbc:mysql://localhost:3306/db --username root --password 123456 --table u...原创 2019-05-30 18:18:01 · 189 阅读 · 0 评论 -
VirtualBox虚拟机网络
虚拟机网络中的比较NAT模式虚拟机与主机关系:只能单向访问,虚拟机可以通过网络访问到主机,主机无法通过网络访问到虚拟机。虚拟机可以ping通主机(此时ping虚拟机的网关,即是ping主机)虚拟机与网络中其他主机的关系: 只能单向访问,虚拟机可以访问到网络中其他主机,其他主机不能通过网络访问到虚拟机。虚拟机与虚拟机之间的关系: 相互不能访问,虚拟机与虚拟机各自完全独立,相互间无法通过网...原创 2019-06-03 14:01:35 · 342 阅读 · 0 评论 -
hive SQL 使用笔记
统计分区表元数据ANALYZE TABLE tableName PARTITION(etl_tx_dt=20190729) COMPUTE STATISTICS;DESCRIBE EXTENDED tableName PARTITION(etl_tx_dt=20190729);原创 2019-07-31 15:30:17 · 221 阅读 · 0 评论