StreamSet操作

• MySQL
  • 新建pipline
    
  • 新建 MySQL jdbc数据源

  select * from tmp_class_code where id > ${OFFSET} order by id
  

  
  • 数据源JDBC配置
    
    
  • 配置当前工作面
    
  • 指定错误记录存储位置，注意：该文件夹权限为：sdc:sdc(streamset运行节点)
    
  • 新建hive metadata
    
  • 配置：设置带用户密码的hive jdbc：jdbc:hive2://192.168.246.25:10000/hivedb;user=*;password=*
    
  • 设置库表
    
  • 注意数据存储格式
    
  • 新建Hadoop文件系统
    
  • 设置Hadoop文件url
    
  • 配置output File
    
  • 设置文件格式
    
  • 新建hive库
    
  • 设置JDBC
    
  • 查看pipline是否正常（点击run运行）
    
  • binlog
• SQL server：总体配置同MySQL
  • 配置SQL server JDBC
    
  • 设置驱动：com.microsoft.sqlserver.jdbc.SQLServerDriver