5.3Kettle数据的清洗与检验——修补异常值

最新推荐文章于 2023-06-09 18:09:06 发布
最新推荐文章于 2023-06-09 18:09:06 发布
阅读量241 收藏
点赞数
文章标签： etl
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_58016320/article/details/128061937
版权

5.3.3删除包含异常值的记录
创建转换
在这里插入图片描述
配置文本文件输入控件
在这里插入图片描述
将分隔符改成TAB
在这里插入图片描述
获取字段
在这里插入图片描述
配置过滤记录控件
在这里插入图片描述
运行成功
在这里插入图片描述

5.3.4修补异常值
创建转换
在这里插入图片描述
配置表输入，写入SQL语句：SELECT * FROM interpolation_data
在这里插入图片描述
设置过滤记录条件：Height>=114 and Height<=226
在这里插入图片描述

合并记录，选择匹配的关键字段：id
在这里插入图片描述
将Height字段的null值替换为170
在这里插入图片描述
配置字段选择控件
在这里插入图片描述

运行结果：数据表interpolation_data中的异常值已被替换
在这里插入图片描述

 

钟灵7593
关注
第五章kettle（修补异常值）
m0_69235938的博客
10-06 682
通过Kettle工具，替换和修改数据表interpolation_data中的异常值。
kettle案例——数据清洗与校验（删除包含异常值的记录）
weixin_56944252的博客
11-12 427
数据清洗与校验
5.3 异常值处理（修补异常值）
qq_46677624的博客
11-12 1220
修补异常值
第五章 异常值处理--修补异常值
m0_58220133的博客
11-05 173
通过Kettle工具，替换和修改数据表interpolation_data中的异常值。
5.3.4修补异常值
m0_68714092的博客
11-15 129
5.3.4修补异常值
kettle——数据清洗（数据表——＞转换——＞数据表）
m0_60154718的博客
04-19 1528
准备：表a的结构表a 的数据表b的结构。
kettle案例——数据清洗与校验（去除缺失值）
weixin_56944252的博客
11-11 941
数据清洗与校验
kettle——异常值的删除、替换
最新发布
m0_60154718的博客
06-09 1938
①点击”浏览”，将转换结果保存到test6_1.xls文件。②分隔符改为“tab”,取消”头部”复选框。①将转换结果保存为test6_2.xls文件。②获取字段，将温度的值设置成整数。可通过“测试”，验证是否连接数据库。根据执行过程看出过滤了一条记录。③获取字段，并修改字段名称。验证 可知137已被过滤。③预览查看数据表信息。
kettle数据清洗
09-18
利用kettle工具进行数据清洗，按照条件去除不需要的内容
kettle实例-异常值处理-修补异常值
fxxhmn的博客
10-11 2289
1.通过使用Kettle工具，创建一个转换fill_unusual_value，并添加“表输入”控件、“过滤记录”控件、“空操作（什么也不做）”控件、“设置值为NULL”控件、“合并记录”控件、“替换NULL值”控件、字段选择控件以及Hop跳连接线。在“发送false数据给步骤：”处的下拉框中选择“空操作（什么也不做）”，将异常值放在“空操作（什么也不做）”控件中。在“旧数据源：”处的下拉框选择“设置为NULL值”，“新数据源：”处的下拉框选择“空操作（什么也不做）2”；
ETL数据清洗Kettle工具
Huathy的博客
02-23 2243
Kettle是一项进行数据清洗的工具。资源库官方提供的一个需要部署的在线资源库数据库资源库文件资源库（最常用）数据库连接：生成.kdb文件转换：为了完成数据加载、处理。生成的文件为.ktr。kettle的转换都是从输入开始到输出结束。作业JOB：用来调度，生成的文件是.kjb。
kettle中实现动态SQL查询
热门推荐
neweastsun的专栏
09-15 5万+
详细说明kettle中两者方式实现动态查询，分别是占位符和变量方式，示例使用H2数据库，方便学习。
kettle执行SQL脚本
s1162276945的博客
06-09 8921
kettle设置参数
5.3.4 修补异常值
qq_53646158的博客
11-14 1456
《数据清洗》清华大学出版社，实例学习
Kettle实例-缺失值处理-去除缺失值
fxxhmn的博客
10-11 2975
在“条件”处设置过滤的条件，过滤掉有缺失值的数据字段（这里是过滤Name、Pay和Area字段中的缺失值）；1.通过使用Kettle工具，创建一个转换delete_missing_value，并添加“文本文件输入”控件、“字段选择”控件、“过滤记录”控件、“Excel输出”控件、“空操作（什么也不做）”控件以及Hop跳连接线。7.选择和修改”选项卡的“字段”处手动添加文本文件输入控件输出的所有数据字段，也可以单击【获取选择的字段】按钮，Kettle工具自动检索并添加文本文件输入控件输出的所有数据字段。
第五章 修补异常值
skxc_的博客
11-24 370
通过Kettle工具，替换和修改数据表中的异常值。
数据预处理——缺失值和异常值的识别和填补
技术践行者
03-06 1万+
一、什么是异常值？什么是缺失值 异常值（outlier）：异常值是指数据集中存在不合理的值，又称离群点。一组测定值中与平均值的偏差超过两倍标准差的测定值，与平均值的偏差超过三倍标准差的测定值，称为高度异常的异常值。【百度百科】 缺失值（missing value）：是指粗糙数据中由于缺少信息而造成的数据的聚类、分组、删失或截断。它指的是现有数据集中某个或某些属性的值是不完...
ArcGIS中修复异常值
xinxgcq的博客
08-24 1万+
ArcGIS中修复异常值提取异常值修复异常值 在处理遥感数据过程中，往往会有异常值的出现，例如MODIS数据的无效值以及DEM中的空值等，我们在使用数据时一般需要去除这些异常值，并将其修正至相对准确的值。 提取异常值 一般而言，异常值时一个范围内的值或者空值，提取异常值的主要目的是将其设为空值，便于后续的插值操作。关于查找异常值，ArcGIS帮助文档有详细说明： https://doc.a...
Kettle数据清洗与分析的商店客户资料课程设计指南
资源摘要信息:"本资源为计算机专业学生设计的课程项目，主题为《基于Kettle的商店客户资料数据清洗与分析》。项目包含完整的课程设计论文和源码文件，适合作为大学生期末课程设计的参考资料。论文以Word版本提供，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值