wenxi2367的博客

原创 mybatis类嵌套的map.xml

原创 mysql同步到mysql(mysql binlog)

Default Operation:如果未设置sdc.operation.type记录标头属性，则执行的默认增删改操作。Unsupported Operation Handling ：不支持在sdc.operation.type记录标头属性中定义的CRUD操作类型时要采取的操作：

原创 StreamSets：Oracle CDC Client

参考https://www.jianshu.com/p/9c661d9dba86Oracle CDC Client 预备知识 在使用OCC Origin之前，请完成以下任务：（1）启用LogMiner（2）为数据库或表启用补充日志记录（3）创建具有所需角色和权限的用户帐户（4）若要在redo log中使用字典，请提取Log Miner字典（5）安装Oracle JDBC driver任务1：启用LogMiner LogMiner提供了用于汇总数据库活动的r...

原创 StreamStets,上传扩展jar. 报错：REST_1003 - Failed to create directory: lib

问题：上传扩展jar.报错：REST_1003 - Failed to create directory: lib已经做的操作https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Configuration/ExternalLibs.html#concept_pdv_qlw_ft

原创 安装完整版streamSets

背景安装了core版本，但是其他的包都不能在使用的时候正常安装，所以下载完整版。参考https://streamsets.com/documentation/datacollector/3.17.x/help/datacollector/UserGuide/Installation/FullInstall_ServiceStart.html#concept_e45_3dr_bxhttps://blog.csdn.net/macalzheng/article/details/105757679

原创 视图中的数据同步到其他数据库中的表

在新的数据库中创建一个和视图结构相同的表采用ezdw，反向导入视图，但是数据结构和新创建的表描述不同，生成会报错，手动修改字符类型的数据库字段配置streamSets源数据控件ry表的视图简单清洗是否选择字段ChooseFlag，如果是0，显示“未选择”，如果是1，显示“选择”目标数据控件collect库的risk表显示视图的数据ry表数据变化，目标表的数据也变化...

原创 第一个streamsets例子

主要介绍第一个工作流的创建、预览、启动过程，这条数据流将本地文件中的数据进行处理，最终将处理过的数据存放到本地磁盘上(streamsets 运行在CentOS7上)。

原创 streamsets安装部署（core）、数据同步

一.安装部署下载wget --no-check-certificate https://archives.streamsets.com/datacollector/3.17.0/tarball/streamsets-datacollector-core-3.17.0.tgz解压解压到你想要的路径下：配置环境参数[maxiu@zhumei00 ~]$ sudo vi /etc/security/limits.conf添加下述内容（maxiu为用户名）,该步骤需要重启 .

原创 给streamSets装jdbc,实现mysql数据库同步

启动streamSets（还没成功）[root@localhost ~]# docker run --restart on-failure -p 18630:18630 -d --name streamsets-dc streamsets/datacollector dcdocker: Error response from daemon: Conflict. The container name "/streamsets-dc" is already in use by container "

原创 若依多对一

主表页面actions.push('<a class="btn btn-info btn-xs ' + '" href="javascript:void(0)" onclick="detailcheck(\'' + row.id + '\')"><i class="fa fa-list-ul"></i>核查列表</a> ');actions.push('<a class="btn btn-success btn-xs ' + su.

原创 streamSets jdbc组件安装

已经安装的streamSets[root@localhost streamsets-datacollector-3.16.1]# bin/streamsets dcJava 1.8 detected; adding $SDC_JAVA8_OPTS of "-XX:+UseConcMarkSweepGC -XX:+UseParNewGC -Djdk.nio.maxCachedBufferSize=262144" to $SDC_JAVA_OPTSWARN: Security is enabled a

原创 springboot 多对一页面和程序调用

主页面 主页面中按钮对应的方法子页面中被主页面调用的方法（controller中的方法可以被所有页面调用）主页面中对应的方法，标识了要转向的页面（controller中的方法，主页面对主页面，其实，controller中的方法可以交叉调用）...