python实现真正的多线程

Python代码中有一个threading模块,可以创建多线程,但是在这种模式下创建的多线程并不能将多核利用起来,所有由这种模式下创建的线程最多只能共享一个CPU核,所以在有些场景下,需要将一个作业分配给一个独立的线程,并且每个独立的线程可以使用不同的CPU核资源,做到真正的并发执行。

如何实现呢?这里有两个办法

一.通过调用C函数库

C库函数

#include <stdio.h>
#include <stdlib.h>
#include <pthread.h>
#include <unistd.h>


void* myThread(void *arg)
{
    while (1);
}

void createThread(void)
{
    int err;
    pthread_t tid;

    err = pthread_create(&tid, NULL, myThread, NULL);
    if (err != 0) {
        printf("create thread failed!\n");
        return;
    }
    return;
}

编译成动态库:

$ gcc -fPIC -shared -o libfoo.so foo.c

在Python中调用,实现真正的多线程
代码如下:

#-*- coding=utf-8 -*-
from ctypes import *
import time

lib = CDLL("./libfoo.so", RTLD_GLOBAL)
create_thread = lib.createThread
#create_thread.argtypes = [c_void]
#create_thread.restype = c_void

if __name__ == '__main__':
    create_thread()
    create_thread()
    while True:
        print 'I am in main thread!'
        time.sleep(2)

运行起来后,查看CPU占有率:

hank@hank-desktop:~/Study/Python/CallC2$ top
top - 10:33:27 up  2:06,  3 users,  load average: 0.31, 0.08, 0.07
Tasks: 159 total,   1 running, 158 sleeping,   0 stopped,   0 zombie
%Cpu0  :100.0 us,  0.0 sy,  0.0 ni,  0.0 id,  0.0 wa,  0.0 hi,  0.0 si,  0.0 st
%Cpu1  :  0.0 us,  0.0 sy,  0.0 ni,100.0 id,  0.0 wa,  0.0 hi,  0.0 si,  0.0 st
%Cpu2  :  0.3 us,  0.0 sy,  0.0 ni, 99.7 id,  0.0 wa,  0.0 hi,  0.0 si,  0.0 st
%Cpu3  :100.0 us,  0.0 sy,  0.0 ni,  0.0 id,  0.0 wa,  0.0 hi,  0.0 si,  0.0 st
KiB Mem:   8166744 total,  1696620 used,  6470124 free,   280708 buffers
KiB Swap:        0 total,        0 used,        0 free.   731816 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND                                      
 2625 hank      20   0   51404   7616   4824 S 199.8  0.1   0:17.52 python                                       
 1035 daemon    20   0  517408   8136   7144 S   0.3  0.1   0:25.53 CodeMeterLin                                 
 2628 hank      20   0   29152   3324   2804 R   0.3  0.0   0:00.01 top

可以看到在C库中创建的两个线程(while无限循环)分别消耗掉了两个独立的CPU核,这也就验证了可以做到真正并发的目的。

 

  • 3
    点赞
  • 29
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
### 回答1: 在 Python 中,有两种方法来实现多线程编程: 一种方法是使用 `threading` 模块中的 `Thread` 类。要使用这种方法,您需要创建一个 `Thread` 类的实例,并将要在线程中运行的函数作为参数传递给该实例。然后,可以调用该实例的 `start()` 方法来启动线程。 例如: ``` import threading def print_number(number): print(number) thread = threading.Thread(target=print_number, args=(1,)) thread.start() ``` 另一种方法是使用 Python 中的 `multiprocessing` 模块。这个模块提供了一个类似于 `threading` 模块的接口,但是它使用的是进程而不是线程。这意味着它可以在多核 CPU 上更有效地利用多个核心。 例如: ``` import multiprocessing def print_number(number): print(number) process = multiprocessing.Process(target=print_number, args=(1,)) process.start() ``` 希望这能帮到你! ### 回答2: Python实现多线程有多种方式。常用的有使用threading模块来创建和管理多个线程。 首先,我们需要导入threading模块。然后,我们可以通过继承Thread类或使用threading.Thread函数来定义自己的线程类。 如果我们选择继承Thread类,我们需要重写run方法,在其中定义线程的行为。另外,我们可以重写构造函数来传入线程参数。例如: ``` import threading class MyThread(threading.Thread): def __init__(self, thread_id): threading.Thread.__init__(self) self.thread_id = thread_id def run(self): print("Thread %d is running" % self.thread_id) # 创建线程实例 thread1 = MyThread(1) thread2 = MyThread(2) # 启动线程 thread1.start() thread2.start() # 等待线程执行结束 thread1.join() thread2.join() print("Main thread exits") ``` 这个例子创建了两个自定义的线程实例,并同时启动它们。每个线程在运行时会打印一个消息,然后主线程等待所有子线程执行结束后退出。 另一种方法是使用threading.Thread函数来创建线程。例如: ``` import threading def print_msg(thread_id): print("Thread %d is running" % thread_id) # 创建线程实例 thread1 = threading.Thread(target=print_msg, args=(1,)) thread2 = threading.Thread(target=print_msg, args=(2,)) # 启动线程 thread1.start() thread2.start() # 等待线程执行结束 thread1.join() thread2.join() print("Main thread exits") ``` 这个例子创建了两个线程实例,并通过target参数传入线程函数和args参数传入函数参数。线程函数简单打印一个消息。然后主线程等待所有子线程执行结束后退出。 无论哪种方式,都可以实现多线程的功能。然而,需要注意的是,在Python中,由于全局解释器锁(GIL)的存在,多线程不能真正实现并行执行,因为同一时间只有一个线程可以执行Python字节码。为了实现真正的并行执行,可以考虑使用多进程。 ### 回答3: Python实现多线程可以使用内置的`threading`模块。下面是实现多线程的几个步骤: 1. 导入`threading`模块:首先需要导入`threading`模块,该模块提供了多线程编程的相关功能。 2. 创建线程对象:使用`threading.Thread`类可以创建一个线程对象。例如,可以使用`my_thread = threading.Thread(target=my_function)`来创建一个线程对象,并指定线程要执行的函数。 3. 启动线程:调用线程对象的`start()`方法可以启动线程,使其开始执行。例如,可以使用`my_thread.start()`来启动线程。 4. 实现线程函数:定义一个函数,作为线程的执行代码。该函数会在新的线程中执行。可以在函数体中编写需要在线程中执行的代码。 5. 线程执行完毕:在线程执行完毕后,会自动退出并释放占用的资源。 下面是一个简单的多线程示例: ```python import threading def my_function(): for i in range(5): print("线程执行中...") print("线程执行完毕。") # 创建线程对象 my_thread = threading.Thread(target=my_function) # 启动线程 my_thread.start() # 等待线程执行完毕 my_thread.join() print("主线程执行完毕。") ``` 上述代码创建了一个线程对象`my_thread`,指定了要执行的函数`my_function`。然后调用`start()`方法启动线程。线程内部的代码会在新线程中执行。主线程会等待线程执行完毕(使用`join()`方法),然后输出"主线程执行完毕"。 需要注意的是,由于Python中的全局解释器锁(GIL)限制,多线程无法真正实现多核并行,而只是在单个CPU核心上切换执行。如果需要进行计算密集型的并行计算,建议使用多进程代替多线程
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值