kettle设计转换时的几个注意点
1.从步骤插入数据选项:除变量外,用户输入的SQL 语句在运行时还可以接收其它步骤的运行结果,也就是将其它步骤的运行结果作为一个SQL 语句的参数。如下面的SQL 语句,使用 ?作为接收参数的位置。(语句格式类似于JDBC规范里的PreparedStatement 语句)
2.在做记录集连接之前每个记录集都要先排好序
3.内存中分组不需要提前排序,记录集连接前要先排序
4.记录集连接操作会保留两个主键,合并记录操作则只剩一个
5.记录关联(笛卡尔积输出)两个数据集A和B做笛卡尔积运算,输出结果为合并的结果。记录集连接,类似数据库中的几种常见连接方式,inner join、left outer、right outer、full outer
内连接只返回两个表相同的列值的所有行,左连接返回左表中的所有行,在右表中没有匹配的全为空值。
6.选择了【裁剪表】,在数据加载之前会对此表做truncate操作