- 博客(3)
- 收藏
- 关注
原创 Sqoop 基本原理
Sqoop什么是Sqoop?Sqoop数据传输RDBMS ->HDFSincremental appendincremental lastmodifiedMYSQL->HBASESqoop job常用命令什么是Sqoop?什么是Sqoop?sqoop其实是一个桥梁,主要在关系型数据库和Hadoop之间进行数据传输,进行数据的导入和导出关系图导出和导入Sqoop数据传输RDBMS ->HDFSmysql到hdfs通过sqoop进行数据传输 分两种,一是只支持新
2020-11-20 08:17:15 948 1
原创 Hadoop、yarn、hive、zookeeper、hbase、sqoop所有配置文件代码汇总(复制就方便的很,基本都有)
**环境变量**export JAVA_HOME=/opt/software/jdk180export HADOOP_HOME=/opt/software/hadoop/hadoop260export HIVE_HOME=/opt/software/hadoop/hive110export PATH=$HIVE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$JAVA_HOME/bin:$PATHexport CLASS_PATH=.:$JAVA_H..
2020-11-17 08:19:28 202
原创 Vmware安装详细教程
一、先下载镜像文件,并记住文件位置(一会儿要用的!!)这里我用的 CentOS-7-x86_64-DVD-1908二、在自己的学习盘里新建文件夹,专门用来存在文件三、打开vmware,创建新的虚拟机四、下一步下一步,选择linux,还有自己镜像文件的版本五、然后放入学习盘中,刚刚新建的文件中注意默认系统盘哦!!!六、指定磁盘大小,这里我设置的40G(学的大数据,一般20就够啦)七、然后设置一下内存和处理器的大小,然后把镜像导进去八、设置虚拟机的installation destinat
2020-11-13 21:20:32 1246
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人