Datastage中Sequential file和Data Set、File Set三者之间的区别

在DS中有三种我们常用到的数据文件类型:Sequential file和Data Set、File Set

一、 Sequential file
    
    定长和非定长文件字符文件。
   1、用于读文件和写文件。
   2、可以有一个单一的输入连接或者一个单一的输出连接和一个单一的拒绝连接,支持格式(TXT、CSV、XLS)。不能同时?
   3、通常在连续模式下执行。
   4、执行读取多个文件时,可以设置multiple readers参数。
   5、文件定义(行格式、列格式),列的分隔符和行的换行符之类的设置。
二、Data Set

    控制文件(.ds)和数据文件分开存储,是DS自带的的文件格式,只能被Ds读取的二进制文件。
    1、二进制文件,无法直接查看,使用Data Set 管理程序查看数据。
    2、后缀.ds
    3、持久性数据
    4、良好的性能
    5、两部分组成:
        ①描述文件(包含数据结构和数据地址)
        ②数据文件(包含数据、多个文件,每个节点一个)



三、File Set

    和Data Set类似。控制文件(.ds)和数据文件分开存储
    1、用于读入和写入 文件集
    2、具有单输入连接或者一个输出和一个拒绝连接。
    3、后缀.FS
    4、仅处理大于2GB的文件比较适用。
    5、仅在并行模式下使用
    6、和Data Set类似:
        ①分区
        ②分为描述文件和数据文件
    7、File Set是文本文件,可以被外部应用程序读取。

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/30260000/viewspace-1844641/,如需转载,请注明出处,否则将追究法律责任。

转载于:http://blog.itpub.net/30260000/viewspace-1844641/

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值