6.3数据粒度的转换

最新推荐文章于 2025-01-23 12:46:13 发布
最新推荐文章于 2025-01-23 12:46:13 发布
阅读量192 收藏
点赞数
文章标签： 数据库 sql mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sheepcoder/article/details/128062067
版权

创建转换
在这里插入图片描述
配置表输入控件，输入SQL语句：SELECT * FROM company
在这里插入图片描述
配置字段选择控件，输入字段名称：id,salesArea
在这里插入图片描述
配置排序记录控件，获取字段salesArea
在这里插入图片描述
配置表输入2控件，输入SQL语句：SELECT CITY.PID FROM city
在这里插入图片描述
配置排序记录2控件，获取字段名称：city
在这里插入图片描述
配置合并排序控件，用左外连的方式连接salesArea和city字段
在这里插入图片描述
配置字段选择2控件，输入字段名称：id，pid，salesArea
在这里插入图片描述
配置排序记录3控件
在这里插入图片描述
配置表输入3控件，输入SQL语句查询pid，provincial
在这里插入图片描述
预览数据
在这里插入图片描述
配置排序记录4控件
在这里插入图片描述
配置合并排序控件，使用左外连方式
在这里插入图片描述
配置过滤记录控件
在这里插入图片描述
配置字段选择3控件，输入字段名称：id，Provincial
在这里插入图片描述
配置表输出控件
在这里插入图片描述
配置映射匹配控件
在这里插入图片描述
配置表输出控件，选择表字段和流字段
在这里插入图片描述
配置字段选择4控件，输入字段名称：id，salesArea
在这里插入图片描述
配置表输出2控件
在这里插入图片描述
在这里插入图片描述
创建新转换granularity_merge
在这里插入图片描述
配置表输入控件，输入SQL语句
在这里插入图片描述
配置字段选择控件，输入字段名称：id，salesArea
在这里插入图片描述
配置排序记录控件，按字段id升序排序
在这里插入图片描述
配置表输入控件，输入SQL语句
在这里插入图片描述
预览数据
在这里插入图片描述
配置字段选择2控件
在这里插入图片描述
配置排序记录2控件，按id升序排序
在这里插入图片描述
配置记录集连接控件
在这里插入图片描述
配置字段选择3控件，输入字段名称
在这里插入图片描述
配置映射匹配字段
在这里插入图片描述

配置表输出控件，选择数据库字段
在这里插入图片描述
创建作业granularity
在这里插入图片描述
配置作业定时调度控件
在这里插入图片描述
配置转换控件
在这里插入图片描述
配置转换2控件

在这里插入图片描述

运行成功
在这里插入图片描述

sheep0410
关注
数据治理开源工具：ApacheAtlasDataHub等
AI天才研究院
08-13 1023
数据治理开源工具：ApacheAtlas、DataHub等 作者：禅与计算机程序设计艺术 1. 背景介绍 1.1 数据治理的重要性 在当今大数据时代,企业和组织面临着海量数据的挑战。如何有效地管理、
数据粒度的转换
CC的博客
10-14 2104
数据粒度转换：业务系统一般存储非常明细的数据，而数据仓库中数据是用来分析的，不需要非常明细的数据。一般情况下，会将业务系统数据按照数据仓库粒度进行聚合，这个过程就被称为数据粒度的转换。例如，将城市转换成省份或者直辖市。通过Kettle工具将对数据表company进行数据粒度的转换操作，即将数据表company中字段为salesArea的数据都统一成省级份，并存储到新数据表company_new中。
kettle实例--数据转换-数据粒度的转换
fxxhmn的博客
10-25 1014
在“第一个步骤的连接字段”和“第二个步骤的连接字段”处添加连接字段，这里添加的连接字段是id和id，用于将“排序记录”控件流中的数据与“排序记录2”控件中的数据合并连接；单击【输入字段映射】按钮，弹出“映射匹配”对话框，依次选中“源字段”选项框的字段和“目标字段”选项框对应的字段，再单击【Add】按钮，将一对映射字段添加至“映射”选项框中，若“源字段”选项框的字段和“目标字段”选项框的字段相同，则可以单击【猜一猜】按钮，让Kettle自动实现映射，具体如图所示。双击“表输入3”控件，进入“表输入”界面。
《数据清洗》第六章 数据转换
weixin_45672039的博客
11-04 816
一、数据粒度的转换 1、数据准备 将这个txt文件 2、打开kettle工具，创建转换3、配置文本文件输入控件 进入“文本文件输入”界面，单击“浏览”按钮，选择要抽取的personnel_data.txt文件，单击“增加”按钮，将要抽取的personnel_data.txt文件添加到generalization转换中 单击“内容”选项卡，在分隔符处清除默认分隔符“；”，单击“Insert TAB”按钮，在分隔符处插入一个制表符；取消勾选“头部”复选框 单击“字段”选项卡，根据pe..
6.3数据粒度转换
m0_62489586的博客
11-29 75
6.3 数据粒度的转换
zeeee_1234的博客
11-25 146
通过Kettle工具将对数据表company进行数据粒度的转换操作，即将数据表company中字段为salesArea的数据都统一成省级份，并存储到新数据表company_new中。
《数据清洗》第六章 （6.3数据粒度的转换）
qq_52256519的博客
11-10 365
《数据清洗》
案例6.3 数据粒度的转换
weixin_52114746的博客
11-19 110
ETL
6.3Kettle数据转换——数据粒度的转换
kiritobryant的博客
11-07 258
12.配置“记录集连接2”控件。11.配置“排序记录4”控件。14.配置“字段选择3”控件。16.配置“字段选择4”控件。6.配置“排序记录2”控件。7.配置“记录集连接”控件。8.配置“字段选择2”控件。9.配置“排序记录3”控件。10.配置“表输入3”控件。13.配置“过滤记录”控件。17.配置“表输出2”控件。3.配置“字段选择”控件。4.配置“排序记录”控件。15.配置“表输出”控件。2.配置“表输入”控件。5.配置“表输入2”控件。
kettle案例6.3--数据转换---数据粒度的转换
m0_68381568的博客
11-25 746
数据转换---数据粒度的转换
数据清洗黑马程序员第六章数据转换——阅读笔记
m0_53823329的博客
10-24 1625
6.1多数据源的合并 随着信息技术的发展和科技的进步，人类步入了大数据时代，大数据作为当前高科技时代的产物，它的种类多而繁杂。如果想要得到需要的数据，则这些需要的数据有可能来源于多个不同的数据源中，此时，我们可以将多个数据源进行合并操作，从而获取到所需要的数据。 案例实现 数据准备 假设，某公司旗下有两个子公司，分别为A公司和B公司，且这两个子公司均在销售手机，其中A公司的手机日销售情况存储在CSV文件中，即文件company_a.csv；B公司的手机日销售情况存储在数据库的数据表中，即数据表co.
《数据清洗》——数据转换课后作业
m0_54089886的博客
11-02 595
6.3数据粒度的转换 业务系统一般存储非常明细的数据，而数据仓库中数据是用来分析的，不需要非常明细的数据。一般情况下会将业务系统数据按照仓库粒度进行聚合，这个过程被称为数据粒度的转换。 下面通过Kettle工具对文本文件personnel_data.txt中的数据进行数据粒度的转换，即将文本文件personnel_data.txt中字段为household_register的数据统一省份，并输出到文本文件personnel_data_new.txt中。 1.打开Kettle文件，创建转换 ...
数仓体系与数据治理全集
weixin_44687655的博客
04-06 3525
数据仓库（Data Warehouse），可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它出于分析性报告和决策支持目的而创建。
Python毕业设计选题：基于django+vue的二手电子设备交易平台设计与开发
m0_74825718的博客
01-17 2074
虽然我在前三年内学习过许多和计算机相关课程，从基础的Python语言到数据库语言等等，但都只是了解了这些课程的皮毛，对理论知识仅仅停留在书本上，对知识的掌握程度还不够深入，不能进行实际的编程设计开发，距离自己真正开发设计一款软件项目还是有一定的距离的，更别提应用到企业项目的设计开发中去了。首先对项目提出可行性分析，在分析完其经济，技术，操作方面的可行性之后，准备相应的计算机软硬件开发配置，然后对其进行具体的功能需求分析，设计好相应的数据库，接下来就是进行系统的详细设计了；进行详细的设计，实现主要功能。
EF Core 乐观、悲观并发控制
Anoxia_li的博客
01-22 1245
乐观并发控制能够避免悲观锁带来的性能、死锁等问题，因此推荐使用乐观并发控制而不是悲观锁。如果有一个确定的字段要被进行并发控制，那么使用IsConcurrencyToken()把这个字段设置为并发令牌即可；如果无法确定一个唯一的并发令牌列，那么就可以引入一个额外的属性设置为并发令牌，并且在每次更新数据的时候，手动更新这一列的值。如果用的是SQLServer数据库，那么也可以采用RowVersion列，这样就不用开发者手动来在每次更新数据的时候，手动更新并发令牌的值了。
【趣学SQL】第九章：SQL 未来趋势 9.1 新兴 SQL 技术与工具——当SQL遇见“量子计算“和“元宇宙“的奇幻漂流
01-23 825
欢迎来到「SQL未来科技博览会」！今天我们将化身"时间旅行导游"，带您穿越到2030年，看看SQL如何在大数据、AI和云计算的加持下，从"传统老管家"进化成"赛博数字生命体"。🚀🔮。
w177健身房管理系统设计与实现
卓怡工作室的博客
01-23 1027
信息数据从传统到当代，是一直在变革当中，突如其来的互联网让传统的信息管理看到了革命性的曙光，因为传统信息管理从时效性，还是安全性，还是可操作性等各个方面来讲，遇到了互联网时代才发现能补上自古以来的短板，有效的提升管理的效率和业务水平。传统的管理模式，时间越久管理的内容越多，也需要更多的人来对数据进行整理，并且数据的汇总查询方面效率也是极其的低下，并且数据安全方面永远不会保证安全性能。结合数据内容管理的种种缺点，在互联网时代都可以得到有效的补充。结合先进的互联网技术，开发符合需求的软件，让数据内容管理不管是从
citespace6.3. wos数据处理
最新发布
01-27
### 使用CiteSpace 6.3处理Web of Science (WoS) 数据教程 #### 创建项目文件夹并准备数据 为了有效地管理和存储从Web of Science导出的数据，在计算机上创建一个新的文件夹用于保存即将获取的信息[^1]。 #### ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值