A ---CSDN博客

原创 Zookeeper安装

Zookeeper安装2.1 本地模式安装部署1．安装前准备（1）安装Jdkhttps://blog.csdn.net/weixin_45495390/article/details/116775127?spm=1001.2014.3001.5502（2）拷贝Zookeeper安装包到Linux系统下（3）解压到指定目录[atguigu@hadoop102 software]$ tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/2．配置修改（

2021-05-14 01:55:04 122

原创 liunx java环境安装

Liunk java环境安装防火墙确保Linux的防火墙端口是开启的，如果是阿里云，需要保证阿里云的安全组策略是开放的！# 查看firewall服务状态systemctl status firewalld# 开启、重启、关闭、firewalld.service服务# 开启service firewalld start# 重启service firewalld restart# 关闭service firewalld stop# 查看防火墙规则firewall-cmd --lis

2021-05-14 01:52:21 115

原创 Kettle转换

Kettle转换Concat fields将目标字符拼接为新字符Target Field Name:生成目标字段名Separator：拼接字段使用什么字符进行评价操作Enclosure：用于缺点那些数据是String类型的值映射转换使用字段名：数据源字段名目标字段名：映射后的字段名默认值：不匹配时使用的默认值原值：数据源的值目标值：转换后映射值【注意】原值为Number类型时，使用String类型输入，用数字x.0形式进行映射 Number类型不能作为原值增加常量为

2021-03-15 17:10:58 573

原创 Kettle输出

Kettle输出Excel输出Microsoft Excel 输出 Xlsx扩展名选中生成Excel表格格式Excel输出文本文件输出扩展名：可以为txt和CSVSQL文件输出将指定的数据表导出为SQL语句目标表：指定需要的到处的表单表输出数据库字段：指定数据流中字段与数据库字段映射关系 SQL：该表单不存在时，新建一个表单更新目标表：指定需要更新的表单查询值关键字：指定流中数据与表中数据对应的关键值。一般使用表单主键【类似SQL中的where条件】更新字段

2021-03-15 17:00:34 187

原创 Kettle计算器常用函数

Kettle计算器常用函数Function描述Required fieldsSet field to constant A创建一个具有常数值的字段。ACreate a copy of field A创建一个具有给定字段值的字段副本。AA + BA + B。A and BA - BA - B。A and BA * BA乘以B。A and BA / BA除以B。A and BA * AA的平方。ASQRT( A )A

2021-03-14 23:07:40 4573

原创 Kettle输入

Kettle输入CSV文件编码使用GBK，否则乱码文本文件分隔符设置数据之间的分割，第一行默认位列名Excle文件根据同格式选择不同的表格引擎，xls-2003，xlsx-2007先浏览再添加选择文件中需要读取的工作表多文件合并选择需要合拼的文件或者文件的共有目录使用.*通配符进行合并操作XML文件XML路径：获取对应数据值的路径通过XPath语法表示Xpath语法：https://www.runoob.com/xpath/xpath-syntax.htmlJ

2021-03-14 09:38:52 126

原创 Kettle快速体验

Kettle快速体验CSV-ExcelKettle核心概念并行是指所以的步骤都会在转换启动时同时启动，从自己的输入跳中获取数据，处理后将其输入到指定的输出跳。不会按照指定的流程经行执行，当所以的步骤的输入跳中没有缓存数据时，整个转换就完成了...

2021-03-13 22:30:09 108

原创 Kettle 的安装

Kettle 的安装Kettle安装地址官网： https://community.hitachivantara.com/docs/DOC-1009855 国内镜像地址： http://mirror.bit.edu.cn/pentaho/Pentaho%208.2/client-tools/Kettle的部署 Kettle是纯Java的编写的，允许前需要安装Java运行环境下载JDK，安装JDK，安装JER，配置环境变量...

2021-03-13 22:28:31 146

原创 kettle概述

kettle概述什么是kettleKettle是一款开源的ETL工具。纯Java编写，可以在Window和Liinunx，Unix上运行，绿色无安装，数据抽取高效稳定 ETL ：数据抽取—》数据操作（过滤，脱敏）—》写入目标Kettle核心知识Kettle工程存储方式 1.以XML形式进行存储 2.以资源库的方式进行存储（数据库资源库和文件资源库）Kettle的两种设计方式简述： Transformtion（转换）：完成针对数据的基础操作 Job（作业）：完成对整个工作流的操

2021-03-13 22:20:32 289

weixin_45495390的博客