mongodb导出数据,通过python 解析

1 mongodb导出数据

mongoexport -d eth_ctaddrandfunc -c ctaddr_func_delays -o ./test.json

报错的话:

mongoexport --forceTableScan -d  eth_blockminer  -c blockminers -o ./test.json

导入导出数据的示例

mongoexport -d 数据库名 -c 集合名 -o 导出的地址及文件名称
mongoexport -d lemon -c billList -o ./billList.json
 mongoimport -d 数据库名 -c 集合名 导入的地址及文件名称
 mongoimport -d 1610C -c bill_list ./billList.json

2 python处理
首先将json转为csv文件,安装jsoncsv

pip install jsoncsv -i https://pypi.tuna.tsinghua.edu.cn/simple

转换成csv文件

cat test.json | jsoncsv | mkexcel > jstocs.csv

python导入csv文件,处理好呼出输出csv文件

import pandas as pd
import numpy as np
df=pd.read_csv(r"/opt/gopath/src/pyworkspace/jstocs.csv",encoding='gbk',engine='python')
#data=df['address'].value_counts()
datanp=np.c_[np.unique(df['address'], return_counts=1)]
#data1=pd.DataFrame(datanp)
#data1.to_csv('testnp.csv')
pd.DataFrame(datanp).to_csv('testnp.csv')
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值