![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
氡钫镭锕钍的笔记
氡钫镭锕钍
这个作者很懒,什么都没留下…
展开
-
mongodb千万级数据查询等待问题
0011_mongodb千万级数据查询等待问题从师兄那里拿到一个数据库有上千万条数据,由于其存储格式有些不正规,于是发现正则查询一个里面不存在的数据需要大量时间于是通过阅读源代码注释发现可以通过设置超时指标和抛出异常的方式跳过这些不存在的数据,以节省时间效率# 查询relay是否在traceroute中# 导入模块import pymongo# 连接数据库client = pymongo.MongoClient("mongodb://127.0.0.1:27017/")db = cli原创 2020-12-05 15:53:09 · 3674 阅读 · 0 评论 -
neo4j重复创建节点的问题
0012 neo4j重复创建节点的问题当我们使用neo4j数据库时,会发现哪怕所有属性名和值都一样的情况下,依然会重复创建节点,导致很多本来能聚合的关系变得很乱,于是我找了一些资料,在python中实现了去重的效果# 拓扑+neo4jfrom py2neo import Graph,Node,Relationshipfrom py2neo.matching import NodeMatcherimport pymongoimport re# 正则匹配ip = re.compile('(\d原创 2020-12-05 15:40:45 · 4296 阅读 · 3 评论