python多线程读取数据用不用锁_对Python多线程读写文件加锁的实例详解

Python的多线程在io方面比单线程还是有优势,但是在多线程开发时,少不了对文件的读写操作。在管理多个线程对同一文件的读写操作时,就少不了文件锁了。

使用fcntl

在linux下,python的标准库有现成的文件锁,来自于fcntl模块。这个模块提供了unix系统fcntl()和ioctl()的接口。

对于文件锁的操作,主要需要使用 fcntl.flock(fd, operation)这个函数。

其中,参数 fd 表示文件描述符;参数 operation 指定要进行的锁操作,该参数的取值有如下几种:

LOCK_SH:表示要创建一个共享锁,在任意时间内,一个文件的共享锁可以被多个进程拥有

LOCK_EX:表示创建一个排他锁,在任意时间内,一个文件的排他锁只能被一个进程拥有

LOCK_UN:表示删除该进程创建的锁

LOCK_MAND:它主要是用于共享模式强制锁,它可以与 LOCK_READ 或者 LOCK_WRITE联合起来使用,从而表示是否允许并发的读操作或者并发的写操作

demo

import fcntl

import threading

import time

def writetoTxt(txtFile):

id = threading.currentThread().getName()

with open(txtFile, 'a') as f:

fcntl.flock(f.fileno(), fcntl.LOCK_EX) #加锁

print "{0} acquire lock

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python 中,多线程编程是很常见的操作。但是多线程编程必然涉及到对共享资源的读写操作,而这很容易引起竞争条件,从而导致数据的不一致性。为了解决这个问题,Python 提供了 Lock 和 RLock 两种机制。 1. Lock Lock 是最简单的机制,也是最常用的机制。它通过 acquire() 方法获得,通过 release() 方法释放。当一个线程获得了,其他线程就不能再获得这个,直到这个线程释放为止。 下面是一个简单的例子: ```python import threading lock = threading.Lock() def func(): lock.acquire() print('Hello, world!') lock.release() t = threading.Thread(target=func) t.start() ``` 这个例子中,首先创建了一个 Lock 对象,然后定义了一个 func 函数,在函数中先获得,然后输出一句话,最后释放。在创建一个线程并执行这个函数时,输出的结果是: ``` Hello, world! ``` 在这个例子中,只有一个线程获得了,其他线程不能再获得这个,所以输出的结果只有一行。 2. RLock RLock 是可重入,它可以被一个线程多次 acquire(),而不会发生死。这个机制可以用在递归函数中,因为递归函数可能会多次调用自身。 下面是一个简单的例子: ```python import threading lock = threading.RLock() def func(): lock.acquire() print('Hello, world!') lock.acquire() print('Hello, again!') lock.release() lock.release() t = threading.Thread(target=func) t.start() ``` 这个例子中,首先创建了一个 RLock 对象,然后定义了一个 func 函数,在函数中先获得,输出一句话,再次获得,输出另一句话,最后释放。在创建一个线程并执行这个函数时,输出的结果是: ``` Hello, world! Hello, again! ``` 在这个例子中,虽然 func 函数中多次获得了,但是由于使用的是可重入,所以不会发生死,输出的结果也是正确的。 总结: Lock 和 RLock 都是 Python 中常用的机制,Lock 是最简单的机制,而 RLock 是可重入,可以在递归函数中使用。在多线程编程中,使用这两个机制可以有效地避免竞争条件,保证数据的一致性。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值