大数据调度与同步工具
文章平均质量分 88
大数据调度与同步工具
sq0723
这个作者很懒,什么都没留下…
展开
-
Azkaban安装部署
Azkaban安装部署1、下载后编译修改 build.gradle文件中的maven仓库地址为http://maven.aliyun.com/nexus/content/groups/public/执行命令./gradlew build./gradlew clean./gradlew installDist./gradlew test./gradlew build -x test如果报错:[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-LeVrPT9V-164原创 2022-03-10 17:39:23 · 10985 阅读 · 0 评论 -
sqoop安装及导入导出命令
Sqoop1、安装1)解压sqoop安装包2)配置进入conf目录下 mv sqoop-env-template.sh sqoop-env.sh3)将mysql的jar包放到sqoop的lib目录下4)启动先启动hadoop,再使用sqoop二、sqoop使用命令1、sqoop improt1)访问明码访问:sqoop list-databases \–connect...原创 2019-09-24 12:31:01 · 213 阅读 · 0 评论 -
Airflow安装部署及遇到的问题总结
Airflow的安装部署操作系统是ubuntu16.04LTS,使用系统自带的python3.5.之前在utuntu14上安装airflow会提示要求python系统版本>=3.4.一、 安装1、 环境准备1)安装pip,使用python3时要安装pip3,使用命令sudo apt-get install python3-2)检查python依赖,输入python3命令,import ...原创 2019-11-29 17:51:39 · 1116 阅读 · 0 评论