Python Mongodb 查询以及批量写、批量查

查询

查询包含XXX

db.newcaruserinfo.find({'UserName':{"$regex": "\\*"}}) \\转义

简单的聚合查询:

value = my_set.aggregate([{'$group':{'_id':"$fence_id", 'num_tutorial':{'$sum':1}}}]) 

#类似于:select  fence_id,count(*) from *** group by fence_id

查询包含XXX

{name:/xxx/}

查询以XXX开头

{name:/^xxx/}

查询以XXX结尾

{name:/xxx^/}

查询忽略大小写

{name:/xxx/i}

1 ) . 大于，小于，大于或等于，小于或等于

$gt:大于
$lt:小于
$gte:大于或等于
$lte:小于或等于

例子：

db.collection.find({ "field" : { $gt: value } } ); // greater than : field > value
db.collection.find({ "field" : { $lt: value } } ); // less than : field < value
db.collection.find({ "field" : { $gte: value } } ); // greater than or equal to : field >= value
db.collection.find({ "field" : { $lte: value } } ); // less than or equal to : field <= value

如查询j大于3,小于4:

db.things.find({j : {$lt: 3}});
db.things.find({j : {$gte: 4}});

也可以合并在一条语句内:

db.collection.find({ "field" : { $gt: value1, $lt: value2 } } ); // value1 < field < value

2) 不等于 $ne

例子：

db.things.find( { x : { $ne : 3 } } );

3) in 和 not in ($in $nin)

语法：
db.collection.find( { "field" : { $in : array } } );

例子：

db.things.find({j:{$in: [2,4,6]}});
db.things.find({j:{$nin: [2,4,6]}});


4) 取模运算$mod

如下面的运算：
db.things.find( "this.a % 10 == 1")

可用$mod代替：

db.things.find( { a : { $mod : [ 10 , 1 ] } } )


5)  $all

$all和$in类似，但是他需要匹配条件内所有的值：

如有一个对象：

{ a: [ 1, 2, 3 ] }

下面这个条件是可以匹配的：

db.things.find( { a: { $all: [ 2, 3 ] } } );

但是下面这个条件就不行了：

db.things.find( { a: { $all: [ 2, 3, 4 ] } } );

6)  $size

$size是匹配数组内的元素数量的，如有一个对象：{a:["foo"]}，他只有一个元素：

下面的语句就可以匹配：db.things.find( { a : { $size: 1 } } );

官网上说不能用来匹配一个范围内的元素，如果想找$size<5之类的，他们建议创建一个字段来保存元素的数量。

You cannot use $size to find a range of sizes (for example: arrays with more than 1 element). If you need to query for a range, create an extra size field that you increment when you add elements.

 

7）$exists

$exists用来判断一个元素是否存在：

如：

db.things.find( { a : { $exists : true } } ); // 如果存在元素a,就返回
db.things.find( { a : { $exists : false } } ); // 如果不存在元素a，就返回

8)  $type
 

$type 基于 bson type来匹配一个元素的类型，像是按照类型ID来匹配，不过我没找到bson类型和id对照表。

db.things.find( { a : { $type : 2 } } ); // matches if a is a string
db.things.find( { a : { $type : 16 } } ); // matches if a is an int
9）正则表达式

mongo支持正则表达式，如：

db.customers.find( { name : /acme.*corp/i } ); // 后面的i的意思是区分大小写

10)  查询数据内的值

下面的查询是查询colors内red的记录，如果colors元素是一个数据,数据库将遍历这个数组的元素来查询。db.things.find( { colors : "red" } );

11) $elemMatch

如果对象有一个元素是数组，那么$elemMatch可以匹配内数组内的元素：

> t.find( { x : { $elemMatch : { a : 1, b : { $gt : 1 } } } } ) 
{ "_id" : ObjectId("4b5783300334000000000aa9"), 
"x" : [ { "a" : 1, "b" : 3 }, 7, { "b" : 99 }, { "a" : 11 } ]
}$elemMatch : { a : 1, b : { $gt : 1 } } 所有的条件都要匹配上才行。

注意，上面的语句和下面是不一样的。

> t.find( { "x.a" : 1, "x.b" : { $gt : 1 } } )
$elemMatch是匹配{ "a" : 1, "b" : 3 }，而后面一句是匹配{ "b" : 99 }, { "a" : 11 } 


12)  查询嵌入对象的值

db.postings.find( { "author.name" : "joe" } );

注意用法是author.name，用一个点就行了。更详细的可以看这个链接： dot notation

举个例子：

> db.blog.save({ title : "My First Post", author: {name : "Jane", id : 1}})

如果我们要查询 authors name 是Jane的, 我们可以这样：

> db.blog.findOne({"author.name" : "Jane"})

如果不用点，那就需要用下面这句才能匹配：

db.blog.findOne({"author" : {"name" : "Jane", "id" : 1}})

下面这句：

db.blog.findOne({"author" : {"name" : "Jane"}})

是不能匹配的，因为mongodb对于子对象，他是精确匹配。

 

13) 元操作符 $not 取反

如：

db.customers.find( { name : { $not : /acme.*corp/i } } );db.things.find( { a : { $not : { $mod : [ 10 , 1 ] } } } ); 

创建连接

conn=MongoClient('127.0.0.1',27017)

db=conn.test  #连接test库

my_set=db.test #l连接test表

查询指定数据

imeis=[ ]

value=db.vin_change.find({'imei':{'$in':imeis}})

db.blog.find() 相当于select * from blog 
db.blog.find({"age":27}) 相当于select * from blog where age='27'
db.blog.find({"age":27,"name":"xing"}) 相当于select * from blog where age='27' and name="xing"
db.blog.find({},{"name":1}) select name from blog ,如果name：0则是不显示name字段
db.blog.find().limit(1) 相当于select * from blog limit 1

db.blog.find().sort({_id:-1}).limit(1)相当于select * from blog order by _id desc limit 1
db.blog.find().skip(10).limit(20) 相当于select * from blog limit 10,20

导入导出表

在命令行运行:

导出:

mongoexport -d dbname -c collectionname -o file --type json/csv -f field

        参数说明：

            -d ：数据库名

            -c ：collection名

            -o ：输出的文件名

            --type ： 输出的格式，默认为json

            -f ：输出的字段，如果-type为csv，则需要加上-f "字段名"

示例:sudo mongoexport -d mongotest -c users -o /home/python/Desktop/mongoDB/users.json --type json -f  "_id,user_id,user_name,age,status"

带账号密码：mongoexport --host  --port 27017 --username "b" --password ""  -d risk2 -c company_rank -o ./company_rank.json --type json --authenticationDatabase admin 

导入:

 mongoimport -d dbname -c collectionname --file filename --headerline --type json/csv -f field

        参数说明：

            -d ：数据库名

            -c ：collection名

            --type ：导入的格式默认json

            -f ：导入的字段名

            --headerline ：如果导入的格式是csv，则可以使用第一行的标题作为导入的字段

            --file ：要导入的文件

示例： sudo mongoimport -d mongotest -c users --file /home/mongodump/articles.json --type json

 

批量写

count=0
    while line:
        count=count+1
        lis=line.split(',')
        data={'_id':lis[0]}
        res.append(data)
        if count%10000==0:
            print count
            my_set.insert(res)
            res=[]
        line=h.readline()
    if res:
        my_set.insert(res)
    h.close()

批量查

value = my_set.find({'_id':{'$in':lis}})

https://www.cnblogs.com/melonjiang/p/6536876.html