使用sqoop脚本每日定时向数据仓库全量、增量导入数据
使用sqoop脚本每日定时向数据仓库全量、增量导入数据一、导入方式简述二、实例分析2.1 源数据mysql 建库建表并插入数据2.2 在hive中数据仓库ods层建库建表:2.3 业务需求:2.4 全量导入一、导入方式简述数据仓库中从数据源采集原始数据导入 ODS(原始数据层)通常有两种方式:全量导入和增量导入。全量导入的表一般为数据量小,变化不大的表,而增量导入一般是用于表数据较大,每天又有很多新增修改数据的表。二、实例分析2.1 源数据mysql 建库建表并插入数据下载sql脚本:snbap_
原创
2020-09-14 20:15:54 ·
4015 阅读 ·
1 评论