项目场景:
简述:
使用DATAX进行Mongo的数据抽取,然后写入到mysql中,其中会牵涉到全量数据的写入和增量数据的写入。
全量 数据的写入我们只需要正常写JSON模板即可,使用column将要获取的字段。但是考虑到有增量数据获取的时候,需要增加限定条件。
{
"job": {
"content": [
{
"reader": {
"name": "mongodbreader",
"parameter": {
"address":["IP:端口号"],
"toUri":true,"ssl":false,
"trustStore":"",
"trustStorePassword":"",
"userName":"xxx",
"userPassword":"",
"dbName":"xxxx",
"collectionName": "xxxx",
"column":[
{
"name":"CRT_TM",
"type":"string"
}
]
}
},
"writer": {
"name": "mysqlwriter",
"parameter": {
"column": [
"CRT_TM"
],
"connection": [{
"jdbcUrl":