由于系统软件升级,旧版本为了便捷存储Json数据使用mongo数据库,系统升级使用了mysql5.7,所以需要将原先mongo数据库数据迁移至mysql数据库,迁移过程中也学习了很多数据处理方法,以此记录一下。
说一下这次数据迁移的总体思路
首先需要把服务器的mongo数据备份然后导入自己本地的mongo数据库 这里我使用的是mongodump/mongorestore
输入命令:sudo mongodump -h 127.0.0.1:27017 -d test -o /xx/xx/xx/mongodump/
参数说明:
-h: MongDB所在服务器地址,例如:127.0.0.1,当然也可以指定端口号:127.0.0.1:27017
-d: 需要备份的数据库实例,例如:test
-o: 备份的数据存放位置,例如:/home/mongodump/,当然该目录需要提前建立,这个目录里面存放该数据库实例的备份数据。
现在数据已经备份完成复制到本地
输入命令:mongorestore -h 127.0.0.1:27017 -d test --dir /home/mongodump/test/
参数说明:
-h: MongoDB所在服务器地址
-d: 需要恢复的数据库实例,例如:test,当然这个名称也可以和备份时候的不一样,比如test2
--dir: 备份数据所在位置,例如:/home/mongodump/test/
--drop: 恢复的时候,先删除当前数据,然后恢复备份的数据。就是说,恢复后,备份后添加修改的数据都会被删除。
现在数据已经恢复至本地数据库,由于mongo数据库保存的json对象在mysql都是通过id关联查询,所以我导出为csv格式,处理后直接导入mysql
导出为csv使用mongoexport/mongoimport,我们只需要导出只用mongoexport就可以了,mongoexport有一点就是必须注明导出哪个collection。
输入命令:sudo mongoexport -d -c sysuser -o /home/Library/mongoDB/users.csv --type csv -f "_id,user_id,user_name,age,status"
参数说明:
-d :数据库名
-c :collection名
-o :输出的文件名
--type : 输出的格式,默认为json
-f :输出的字段,如果-type为csv,则需要加上-f "字段名"
导出后的csv格式文件可以使用excel打开,打开后可能文件是乱码
处理方式:右键文件使用记事本打开,上方格式选择字体后打开在格式选择中文编码,保存后解决了中文乱码
最好将csv的头部标题行与mysql字段一一对应
处理好数据以后我这边选择了mysql可视化工具导入
右键点击要导入的表选择导入向导选择csv格式文件->选择源文件->继续->如果csv头部标题行名字跟mysql字段一一对应的话就一直点击继续最后开始就可以导入完成,如果没有一一对应就需要选择一下每个字段对应csv文件中哪一列
mysql可视化工具还是挺方便的,简单易懂,同样也可以使用mysql命令行去导入数据。
至此数据迁移已经完成,只需要将mysql备份导出sql,在服务器的mysql导入执行sql就可以了。