mysql 同步数据到 elasticsearch

需要用到 https://github.com/siddontang/go-mysql-elasticsearch

第一步是安装 go 环境,版本要 1.9+

下载go
 

cd /home
mkdir app
cd app
wget wget https://storage.googleapis.com/golang/go1.9.4.linux-amd64.tar.gz
tar zxvf go1.9.4.linux-amd64.tar.gz
新建GOPATH目录
mkdir /home/work
vi /etc/profile

 

export GOROOT=/home/app/go
export GOBIN=$GOROOT/bin
export PATH=$PATH:$GOBIN
export GOPATH=/home/work
执行 source /etc/profile 生效
查看是否配置成功,执行 go version ,如果返回版本号就正常了。

修改数据库配置文件,默认文件位置为:/etc/my.cnf , 确保有以下配置内容

  1. 开启bin-log
  2. binglog_foramt格式必须为row ;  binlog_format=ROW
  3. binlog-row-image 必须为FULL

修改 river.toml 配置文件 /home/work/src/github.com/siddontang/go-mysql-elasticsearch/etc/river.toml

  • 如果可能,创建关联的Elasticsearch索引,文档类型和映射,否则,Elasticsearch将自动创建这些索引。
  • 执行./bin/go-mysql-elasticsearch -config=./etc/river.toml 开始同步数据,以后新增数据都会自动同步到ES中。
展开阅读全文

没有更多推荐了,返回首页