![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kettle
黑暗料理界的扛把子
新的公司新的开始,每天都是活力满满
展开
-
kettle组件-行转列
使用场景描述使用组件【转换-》行转列】原创 2020-07-21 16:31:48 · 271 阅读 · 0 评论 -
列转行与数据集连接在业务场景的组合应用
今天业务部门提出了一个数据需求,需要将两批数据整合在一起,并要求固定的格式。需求图以前做这种图都是通过excel的vlookup,但涉及到业务类型,需要增加行的就比较麻烦了。现在通过kettle 的列转行和数据集连接实现这个功能制作流程图列转行组件的各部分代表意义列转行组件记录集连接(left out)记录集连接如有疑问可咨询微信:c243126035...原创 2020-05-09 11:53:50 · 178 阅读 · 0 评论 -
行列转换小工具
近期在做数据迁移时看到以往的日常报表格式如下图左边,而我入库的结构为下图右边。具体的实现方式:使用kettle的行专列组件进行转换1、转换步骤名称:步骤的名称,在单一的转换中,名称必须唯一。2、Key字段:即关键词字段,行转列操作后,在此配置的字段会形成一个新字段,“Key字段”就是为这个新字段名称。其值为行转换组件中配置的所有“Key值”集合。3.字段:指定用来转变的字段集合,点击右...原创 2020-04-29 17:01:27 · 1002 阅读 · 5 评论 -
kettle 十分钟百万数据迁移
现在需要对以往数据进行整合并进行数据迁移确定目标表 数据源及数据量如下待迁移数据 目标表与Z0_工单_整理备份 的字段是一致的。为了方便后续操作(增删改查、数据迁移、增量备份)需要新增几个字段 1、 id 作为主键,方便更新、删除等修改操作 2、inserTime 数据插入时间,记录更新频次 3、updateTime 时间戳,记...原创 2020-01-20 10:32:29 · 3650 阅读 · 2 评论 -
kettle Excel输入 使用注意事项
1、组件位置2、组件功能读取数据可同时读取多个excel内 sheet名称不同 sheet内字段相同的多个excel内的数据处理数据对字段的类型、长度、经度、格式等进行整理3、使用流程不做错误处理:文件(选择表格引擎;添加文件或目录添加读取excel)---》工作表(选取使用的sheet)---》字段(获取来自头部数据的字段)---》规整格式---》预览文件(选...原创 2019-10-23 18:08:02 · 5372 阅读 · 7 评论