基于netcore实现mongodb和ElasticSearch之间的数据实时同步的工具（Mongo2Es）

基于netcore实现mongodb和ElasticSearch之间的数据实时同步的工具（Mongo2Es）

 

基于netcore实现mongodb和ElasticSearch之间的数据实时同步的工具

支持一对一,一对多,多对一和多对多的数据传输方式.

• 一对一 - 一个mongodb的collection对应一个elasticsearch的index之间的数据同步
• 一对多 - 一个mongodb的collection对应多个elasticsearch的index之间的数据同步
• 多对一 - 多个mongodb的collection对应一个elasticsearch的index之间的数据同步
• 多对多 - 多个mongodb的collection对应多个elasticsearch的index之间的数据同步

环境版本

elasticsearch：v6.1.2
mongodb: v3.4.9
netcore: v2.1.101

这个工具是干什么的

Mongo2Es是用来保持你的mongoDB collections和你的elasticsearch index之间的数据实时同步.它是用mongo oplog来监听你的mongdb数据是否发生变化,无论是增删改查它都会及时反映到你的elasticsearch index上.在使用本工具之前你必须保证你的mongoDB是符合replica结构的,如果不是请先正确设置之后再使用此工具.

如何使用

Download from GitHub

cd src
dotnet publish --framework netcoreapp2.0 -o ./published

如何启动

dotnet Mongo2Es.dll --port {port for web manage} --mongo {mongourl for config}

显示的结果

• 页面管理

• 执行过程

• mongodb里面的数据

• elasticsearch里面的数据

License

The MIT License (MIT). Please see LICENSE for more information.

Reference&Study

• mongo-connector
• mongo-es
• node-mongodb-es-connector
• MongoDB Administration Commands > listCollections
• MongoDB Driver Admin Quick Tour
• MongoDB Driver Using a Tailable Cursor
• Elasticsearch Reference
• Elasticsearch.Net - Low level client
• NLog.MongoDB.NetCore

转载于:https://www.cnblogs.com/cjm123/p/8619851.html