![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
sqoop
文章平均质量分 96
sqoop
宝哥大数据
大数据、机器学习、深度学习
展开
-
业务数据调研及ETL
文章目录一、系统介绍二、电商数据2.1、MySQL数据库2.2、Hive 数据仓库2.2.1、创建表2.2.1.1、用户信息表: tbl_users2.2.1.2、订单数据表: tbl_orders2.2.1.3、商品表: tbl_goods2.2.1.4、行为日志表: tbl_logs2.2.2、导入数据至Hive表2.2.2.1、用户信息表: tbl_users 一、系统介绍 整个用户画像(UserProfile)项目中,数据、业务及技术流程图如下所示: 其中数据源存储在业务系统数据库:MySQL 数原创 2021-04-26 22:42:58 · 1122 阅读 · 5 评论 -
Sqoop问题
1、修改时数据字段和顺序一致,但是一直在将 nvarchar 值 'Pension Benefits Current/Prior Service Cost' 转换成数据类型 int 时失败 在做修改数据的时候,修改字段的顺序和表结构顺序不一致,导致出错; 实际做更新的时候,是按照表结构的顺序修改数据的 ...原创 2020-10-29 13:20:19 · 299 阅读 · 0 评论 -
sqoop的安装
sqoop, hadoop原创 2016-11-20 17:43:10 · 577 阅读 · 0 评论