Kettle部署到linux系统
准备工作
- 安装JDK;(略)
- 准备.kjb或.ktr转换文件。(以CRM角色用户同步知识库为例)文件夹WORK\CRMKNOW\*.
- 准备pdi-ce-6.1.0.1-196.tar.gz文件(Kettle文件)。
安装步骤
- 复制pdi-ce-6.1.0.1-196.tar.gz文件到所需要部署的服务器。存放到/usr目录下;
- 复制转换文件夹WORK到服务器/usr目录下。(最好复制整个转换文件的文件夹);
- 解压pdi-ce-6.1.0.1-196.tar.gz(命令tar-zxvf pdi-ce-6.1.0.1-196.tar.gz);
- 配置Kettle的JNDI模式数据库访问。配置文件在pdi-ce-6.1.0.1-196\simple-jndi\jdbc.properties。
- 执行转换文件,命令(可忽略此步骤):
知识库 /usr/pdi-ce-6.1.0.1-196/kitchen.sh -file=/usr/WORK/CRMKNOW/数据导入.kjb
黑名单 /usr/pdi-ce-6.1.0.1-196/kitchen.sh -file=/usr/WORK/BLACKLIST/blacklistjob.kjb
- 设置定时:
- crontab -e 添加定时
- crontab -l 查看定时
*/1 * * * * /usr/pdi-ce-6.1.0.1-196/kitchen.sh -file=/usr/WORK/CRMKNOW/数据导入.kjb >> /usr/WORK/ds_$(date +\%Y-\%m-\%d).log &
*/1 * * * * /usr/pdi-ce-6.1.0.1-196/kitchen.sh -file=/usr/WORK/BLACKLIST /blacklistjob.kjb >> /usr/WORK/black_$(date +\%Y-\%m-\%d).log &
*/1 * * * * 为定时规则 每1分钟执行一次
/usr/pdi-ce-6.1.0.1-196/kitchen.sh -file=/usr/WORK/CRMKNOW/数据导入.kjb 为命令
>> /usr/WORK/ds.log 为打印日志到什么地方。一个尖括号是覆盖。两个为叠加
$(date +\%Y-\%m-\%d) 获取当前日期拼接到日志文件名