在 Python 中正确使用互斥锁

Question

我从 python 中的多线程开始（或者至少我的脚本有可能创建多个线程）。这个算法是互斥锁的正确用法吗？我还没有测试过这段代码，它可能甚至无法工作。我只希望 processData 在一个线程中运行（一次一个）并且主 while 循环继续运行，即使队列中有一个线程。

from threading import Thread
from win32event import CreateMutex
mutex = CreateMutex(None, False, "My Crazy Mutex")
while(1)
    t = Thread(target=self.processData, args=(some_data,))
    t.start()
    mutex.lock()

def processData(self, data)
    while(1)
        if mutex.test() == False:
            do some stuff
            break

编辑：重新阅读我的代码，我发现它大错特错。但是，嘿，这就是我在这里寻求帮助的原因。

Answer 1

我不知道您为什么使用 Window 的 Mutex 而不是 Python 的。使用 Python 方法，这非常简单：

from threading import Thread, Lock

mutex = Lock()

def processData(data):
    mutex.acquire()
    try:
        print('Do some stuff')
    finally:
        mutex.release()

while True:
    t = Thread(target = processData, args = (some_data,))
    t.start()

但请注意，由于 CPython 的体系结构（即Global Interpreter Lock），您实际上一次只能运行一个线程——如果其中许多线程是 I/O 绑定的，这很好，尽管您'会希望尽可能多地释放锁，这样 I/O 绑定线程就不会阻塞其他线程的运行。

对于 Python 2.6 及更高版本，另一种方法是使用 Python 的 multiprocessing 包。它反映了threading 包，但会创建可以同时运行的全新进程。更新您的示例很简单：

from multiprocessing import Process, Lock

mutex = Lock()

def processData(data):
    with mutex:
        print('Do some stuff')

if __name__ == '__main__':
    while True:
        p = Process(target = processData, args = (some_data,))
        p.start()

Answer 2

这是我想出的解决方案：

import time
from threading import Thread
from threading import Lock

def myfunc(i, mutex):
    mutex.acquire(1)
    time.sleep(1)
    print "Thread: %d" %i
    mutex.release()


mutex = Lock()
for i in range(0,10):
    t = Thread(target=myfunc, args=(i,mutex))
    t.start()
    print "main loop %d" %i

输出：

main loop 0
main loop 1
main loop 2
main loop 3
main loop 4
main loop 5
main loop 6
main loop 7
main loop 8
main loop 9
Thread: 0
Thread: 1
Thread: 2
Thread: 3
Thread: 4
Thread: 5
Thread: 6
Thread: 7
Thread: 8
Thread: 9

Answer 3

我想从chris-b 改进answer 多一点。

下面是我的代码：

from threading import Thread, Lock
import threading
mutex = Lock()


def processData(data, thread_safe):
    if thread_safe:
        mutex.acquire()
    try:
        thread_id = threading.get_ident()
        print('\nProcessing data:', data, "ThreadId:", thread_id)
    finally:
        if thread_safe:
            mutex.release()


counter = 0
max_run = 100
thread_safe = False
while True:
    some_data = counter        
    t = Thread(target=processData, args=(some_data, thread_safe))
    t.start()
    counter = counter + 1
    if counter >= max_run:
        break

在第一次运行时，如果在while循环中设置thread_safe = False，则不会使用互斥锁，线程将在打印方法中相互跳过，如下所示；

但是，如果你设置thread_safe = True 并运行它，你会看到所有的输出都非常好；

希望这会有所帮助。

Answer 4

你必须在某个时候解锁你的互斥锁......