2019年08月_Manduner_TJU

转载 python中logging模块用法

文章目录1，日志级别2，日志输出2.1 将日志输出到控制台——logging.basicConfig2.2 将日志输出到文件——logging.basicConfig2.3 既要把日志输出到控制台，还要写入日志文件——自定义logger3 日志格式说明1，日志级别日志一共分成5个等级，从低到高分别是：DEBUG、INFO、WARNING、ERROR、CRITICAL。DEBUG：详细的信...

2019-08-23 16:30:47 394

原创 python3多线程、多进程之concurrent.futures模块

1，嘚瑟自打我用上了concurrent.futures模块，我就深深爱上了它，真是爱不释手（现在我每写一些python模块，都会考虑使用futures加快代码的执行速度。）为啥？因为concurrent.futures好用又简单。2，如何使用网上也有许多资料解释如何使用该模块，但是确实存在很多坑，毕竟大部分都不是专家级别的，写写博客可能就是日常的笔记而已。。。但是，要是新手看到了...

2019-08-22 18:04:34 1089

原创 Linux定时任务命令之crontab格式和注意事项

1，格式*　　*　　*　　*　　*　　command分　时　日　月　周　命令具体案例： 0 1 * * * /usr/bin/python3 /home/work/fenci.py */10 * * * * /usr/bin/python3 /home/work/recpool.py */60 * * * * /usr/bin/python3 /home/work/datapro.py...

2019-08-22 16:57:05 500 1

原创 pymongo.errors.CursorNotFound: Cursor not found 原因+解决办法

1，原因一般情况下，工程上需要处理的数量比较大，比如我常处理的数据记录常常在千万级别以上。出现以上问题的原因就是：和数据规模有关，也和对该大规模的数据处理有关。我出现的问题的代码如下，其中dataprocess()函数耗时较长import pymongoclient = pymongo.MongoClient()db = client['db_name']col = db['...

2019-08-22 16:19:33 6505

原创 python3通过pymongo操作mongoDB

1，连接mongodb数据库1.1 连接本地mongoBDmongoDB默认开启的端口号是27017方式一：pymongo.MongoClient()import pymongo#连接本地mongo服务client_bendi = pymongo.MongoClient()db_bendi = client_bendi['db_name']col_bendi = db_bend...

2019-08-22 15:42:18 318

原创 MongoDB常用命令总结

今天做大数据实验，需要从MongoDB上抽取数据，下边介绍一下MongoDB的常使用的一些基本命令。1，启动mongo（1）第一步，Mongo命令工具：首先我所需要的数据在我们实验室的服务器上，所以我用了Xshell5远程控制的服务器，理所当然，下边要介绍的Mongo命令也是在Xshell上执行的；（2）第二步，链接上服务器，成功启动MongoDB后，就可以直接在Xshell上执行命令：...

2019-08-22 15:12:11 1286

manduner的博客