python os 文件锁_Python 多进程操作文件,文件锁好像并没有生效

放一个目前没问题的。

import multiprocessing

import json

import time

import fcntl

def init():

with open('list.txt', 'w') as f:

f.write(json.dumps({'sids': {}}))

def list_tmp(data=None):

if data is None:

with open('list.txt', 'r') as f:

fcntl.flock(f, fcntl.LOCK_EX)

data = f.read()

return json.loads(data)

else:

with open('list.txt', 'r+') as f:

fcntl.flock(f, fcntl.LOCK_EX)

text = f.read()

text = json.loads(text)

text['sids'][data[0]] = data[1]

f.seek(0)

f.truncate()

f.write(json.dumps(text))

def generate(sid):

target = 'http://www.baidu.com'

data = (sid, target)

list_tmp(data)

time.sleep(1)

if __name__ == '__main__':

init()

processes = []

for i in range(100):

p = multiprocessing.Process(target=generate, args=(i,))

processes.append(p)

p.start()

for p in processes:

p.join()

with open('list.txt', 'r') as f:

data = f.read()

data = json.loads(data)

print(len(data.get('sids')))

之前的代码读入旧数据不应该在写的部分的外面,这样多进程读入的本来就是不全的数据,另外 seek 和 truncate 也有很明显的作用,原因不知。。。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值