neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重。

neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重。

准备的数据:

一共有34个省份名称,一千八百多行数据。
准备建立关系为:多条河流→水利厅→省份

在这里插入图片描述
在这里插入图片描述

小白正常的思路:

先连接数据库
再连接csv文件
再转化为list
再用for循环批量建立节点关系
就比如
在这里插入图片描述
然后一运行,感觉没毛病,结果一看neo4j关系图,就会发现建立了很多相同的节点。
节点和节点之间的关系也就乱七八糟了。

开始想办法解决
一个办法就是转换为set元素集,虽然set不重复但他是无序的,说白了就是乱七八糟,小量数据排排表格没准可以解决重复节点的问题,但是大量、无序的数据就很难受了,几天都不一定能弄完。

接下来开始想第二个办法
那就是建立节点的时候,用for、if判断当前节点的name是否在(0,i-1)中出现过
在这里插入图片描述
我感觉思路没得错,但是还是不成功,也尝试了将c=-1下面加break,但是还是么得卵用。
问题应该是使用forif 对list列表的数据进行查询的时候出的错。

以往我使用简单的代码处理大量数据的时候,会经常出错。但是换成小量数据又不会有错了,应该是结构承载不住这么多的数据,就跟脸盆和瀑布一样,想用脸盆接瀑布,顶多接一盆,剩下的全没了。


接下来是干货:

经过度娘得知,可以使用第三方包去重,但只管去重,你后面关系乱了人家第三方包不管。=-=

或者

直接在neo4j里面使用数据库语言去重,但关系还是得重新建立。况且,我想用python去重。

干货来了

后来,我换了个思路,那么就是合并节点。(虽然跟去重差不多)
但总归总做出来了
使用NodeMatcher函数,注意3.5.4才推出的函数

解释一下思路
for循环录入节点关系
使用NodeMatcher判断是否重复
重复的情况下

直接建立关系(干货!)(新节点如何与旧节点建立关系
就是 node一下旧节点的内容 但不提交!!!
直接新旧节点建立关系(记得提交新节点)

cong = Node(‘水利局’, name=data[i][1])
graph.create(cong)
zhu = Node(‘省份’, name=data[i][0])
zhucong = Relationship(cong,‘属于’,zhu)
graph.create(zhucong)

继续
不重复的情况下
建立新节点
又一轮新的if NodeMatcher判断水利局是否建立过

xxx云云云 我就解释第一二层的思路,剩下的看会代码就会了
在这里插入图片描述
在这里插入图片描述

最后给个结果图

在这里插入图片描述

  • 15
    点赞
  • 84
    收藏
    觉得还不错? 一键收藏
  • 7
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值