第一步,开通DataWorks(此为前提,上阿里云官网查看,或咨询阿里云客服);
第二步,在DataWorks建立MongoDB数据源
第三步,在DataWorks新建离线同步;
通常,我们都采用增量同步,这里是关键,官网的帮助文档不够详细。
1、按固定时间或者序号范围增量同步(String格式)
按日期的查询(后面还可以加时分秒,具体格式跟mongodb中数据保持一致)
"query": { "$and" :[{
"createTime" : {
"$gte": "2022-03-01"
}},{
"createTime": {
"$lt": "2022-03-04"
}}]
},
按序号查询
"query": {
"$and": [
{
"orderNo": {"$gte": "A22010100000000000"}
},
{
<