记一次kettle的简单清洗目
目的和Hive教程_(2019版)_一样的,
前言
表结构:
目的:
1.里面有没有空值,有空值需要去除
2.将视频类别列需要将" & “变成”&"
3.将相关视频ID用&连接放在一个列中
提示:以下是本篇文章正文内容,下面案例可供参考
一、pandas是什么?
示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。
二、使用步骤
1.转换的步骤
2.文件输入
代码如下(示例):
3.过滤记录
4.将多列合并成一行(concat)
5.使用Java脚本
1.去除视频类别列中的空格
2.去除相关视频ID连接后留下的&
原始的数据
总结
1.最后搞定了,代码是万能的,增加写代码的能力,
2.在写Java代码时,在IDEA上没有报错,但是在kettle上可能会报错,可能是没有异常处理