python读取cvs文件并写入mongodb

最新推荐文章于 2024-06-08 11:26:48 发布

清萝卜头

最新推荐文章于 2024-06-08 11:26:48 发布

阅读量5.4k

点赞数 2

分类专栏： mongodb 文章标签： python cvs mongodb pymongo

本文链接：https://blog.csdn.net/xiaoQL520/article/details/77246902

版权

本文介绍如何在Python环境中，使用pymongo库将CSV文件数据读取并写入到MongoDB数据库中，涉及的工具有mongodb 3.4.7、Python 2.7.5以及pydata.csv数据文件。

摘要由CSDN通过智能技术生成

1环境

mongodb3.4.7

python2.7.5(centos7自带版本)

pymongo-2.7

pydata.csv(自己的数据文件)

2.dataTrans.py

# -*- coding:utf-8 -*-

import pymongo
import csv
import datetime

#build connection
conn = pymongo.MongoClient('192.168.1.6',20000)
#connect dataBase
mydb = conn.test
#get collection
myCollect = mydb.testCollect
#get data
csvfile = file('/mongodbData/pydata.csv','rb')
#csv_reader = csv.reader(csvfile)
csv_reader = csv.DictReader(csvfile)
#get time befor writing
print datetime.datetime.now()
for i in range(3,10003):
    for row in csv_reader:
        #print data, for test
        #print row    
        #print(row['deviceId'])
        row['deviceId'] = int(row['deviceId'])
        #row['deviceId'] = row['deviceId']+ i
        #print row
        myCollect.insert(row