1. 多任务
多任务是指同一时间内执行多个任务,例如电脑可以同时运行多个软件。
并发是一段时间交替执行任务。并行是同时一起执行多个任务。
实现多任务有两种方式,一种是多进程,另一种是多线程。
1.1 多进程
进程是操作系统进行资源分配和调度运行的基本单位,通俗的说,一个正在运行的程序就是一个进程。
1.1.1 进程创建的步骤
- 导入进程模块
- 创建进程对象
- 启动进程执行任务
import multiprocessing
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
def playGame():
for i in range(10):
print("正在打游戏")
time.sleep(1)
def listenMusic():
for i in range(10):
print("正在听音乐")
time.sleep(0.5)
if __name__ == '__main__':
# 创建进程对象
pro_game = multiprocessing.Process(target=playGame)
pro_music = multiprocessing.Process(target=listenMusic)
# 启动进程
pro_game.start()
pro_music.start()
1.1.2 进程传参
创建进程对象的时候,要告诉进程执行的是哪个方法,所以需要添加target参数。
例如:pro_game = multiprocessing.Process(target=playGame)
如果方法需要传递参数,可以添加args或者kwargs来给方法传入参数。
args:通过元组的形式给任务名传递参数,要注意参数的传递顺序
kwargs:通过字典的方式给任务名传递参数,key值要和参数名对应。
import multiprocessing
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
def playGame(name):
for i in range(10):
print(f"正在玩{name}")
time.sleep(1)
def listenMusic(name):
for i in range(10):
print(f"正在听{name}")
time.sleep(0.5)
if __name__ == '__main__':
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
pro_game.start()
pro_music.start()
1.1.3 进程的执行顺序
在程序中创建两个进程后,执行顺序不固定,因为程序是自上而下运行的,所以首先会先执行前面的进程,然后执行后面的进程,但是后面执行进程的顺序就不固定了。
- 获取进程编号: os.getpid()
- 获取当前父进程编号:os.getppid()
import multiprocessing
import os
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
def playGame(name):
for i in range(10):
print(f"正在玩{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.6)
def listenMusic(name):
for i in range(10):
print(f"正在听{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.5)
if __name__ == '__main__':
# 获取当前进程的编号
print(os.getpid())
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
pro_game.start()
pro_music.start()
1.1.4 主、子进程相互独立,全局变量不共享
程序执行后,会默认启动一个主进程,然后主进程去创建和执行其余子进程。
程序创建的全局变量,主进程和子进程之间不共享。子进程和子进程之间的全局变量也不共享
import multiprocessing
import os
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
# 定义全局变量
run_num = 0
def playGame(name):
for i in range(10):
global run_num
print(f"正在玩{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.6)
run_num += 1
print(f"game进程的run_num的值为:{run_num}")
def listenMusic(name):
for i in range(10):
global run_num
print(f"正在听{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.5)
run_num += 1
print(f"music进程的run_num的值为:{run_num}")
if __name__ == '__main__':
# 获取当前进程的编号
print(os.getpid())
run_num = 1
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
pro_game.start()
pro_music.start()
time.sleep(5)
print(f"主进程的run_num的值为:{run_num}")
1.1.5 进程的结束
- 默认情况下,主进程会等待所有的子进程执行结束后,再结束。
import multiprocessing
import os
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
# 定义全局变量
run_num = 0
def playGame(name):
for i in range(10):
global run_num
print(f"正在玩{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.6)
run_num += 1
print(f"game进程的run_num的值为:{run_num}")
print("game进程执行完毕")
def listenMusic(name):
for i in range(10):
global run_num
print(f"正在听{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.5)
run_num += 1
print(f"music进程的run_num的值为:{run_num}")
print("music进程执行完毕")
if __name__ == '__main__':
# 获取当前进程的编号
print(os.getpid())
run_num = 1
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
pro_game.start()
pro_music.start()
time.sleep(3)
print(f"主进程的run_num的值为:{run_num}")
print("主进程执行完毕")
- 主进程结束后,立刻杀掉子进程,可以设置守护主进程,即主进程退出后,子进程直接销毁。例如:pro_game.daemon = True
import multiprocessing
import os
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
# 定义全局变量
run_num = 0
def playGame(name):
for i in range(10):
global run_num
print(f"正在玩{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.6)
run_num += 1
print(f"game进程的run_num的值为:{run_num}")
print("game进程执行完毕")
def listenMusic(name):
for i in range(10):
global run_num
print(f"正在听{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.5)
run_num += 1
print(f"music进程的run_num的值为:{run_num}")
print("music进程执行完毕")
if __name__ == '__main__':
# 获取当前进程的编号
print(os.getpid())
run_num = 1
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
# 设置守护主进程
pro_game.daemon = True
pro_music.daemon = True
pro_game.start()
pro_music.start()
time.sleep(3)
print(f"主进程的run_num的值为:{run_num}")
print("主进程执行完毕")
- 除此设置守护主进程外,还可以在退出前,手动销毁子进程。例如:pro_game.terminate()
import multiprocessing
import os
import time
'''
进程创建的步骤:
1. 导入包
2. 创建进程对象
3. 启动进程执行任务
'''
# 定义全局变量
run_num = 0
def playGame(name):
for i in range(10):
global run_num
print(f"正在玩{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.6)
run_num += 1
print(f"game进程的run_num的值为:{run_num}")
print("game进程执行完毕")
def listenMusic(name):
for i in range(10):
global run_num
print(f"正在听{name},进程编号是{os.getpid()},父进程编号是{os.getppid()}")
time.sleep(0.5)
run_num += 1
print(f"music进程的run_num的值为:{run_num}")
print("music进程执行完毕")
if __name__ == '__main__':
# 获取当前进程的编号
print(os.getpid())
run_num = 1
pro_game = multiprocessing.Process(target=playGame, args=('原神',))
pro_music = multiprocessing.Process(target=listenMusic, kwargs={"name": "《留香》"})
# 设置守护主进程
# pro_game.daemon = True
# pro_music.daemon = True
pro_game.start()
pro_music.start()
time.sleep(3)
print(f"主进程的run_num的值为:{run_num}")
# 手动销毁子进程
pro_game.terminate()
pro_music.terminate()
print("主进程执行完毕")
1.2 多线程
多线程是实现多任务的另一种方式。
1.2.1 什么是线程
线程是程序执行的最小单位,一个进程中最少有一个线程来负责执行程序。
1.2.2 创建线程的步骤
- 导入模块 threading
- 创建线程对象
threading.Thread(target=任务名),其中任务名为函数或者是方法 - 启动线程
线程对象.start()
import os
import threading
import time
def playGame():
for i in range(10):
print("正在玩游戏")
time.sleep(0.6)
def listenMusic():
for i in range(10):
print("正在听音乐")
time.sleep(0.3)
if __name__ == '__main__':
# 创建线程对象
th_game = threading.Thread(target=playGame)
th_music = threading.Thread(target=listenMusic)
# 启动线程
th_game.start()
th_music.start()
1.2.3 线程的传参
参数传递有两种,分别是:
- args 元组的形式传递参数,但是要注意和参数顺序保持一致
- kwargs 字典的形式传递参数,要注意字典的key和参数要一一对应。
import os
import threading
import time
def playGame(cont):
for i in range(10):
print(f"正在玩{cont}")
time.sleep(0.6)
def listenMusic(cont):
for i in range(10):
print(f"正在听{cont}")
time.sleep(0.3)
if __name__ == '__main__':
# 创建线程对象
th_game = threading.Thread(target=playGame, args=("元梦之星", ))
th_music = threading.Thread(target=listenMusic, kwargs={"cont": "《萤火飞光》"})
# 启动线程
th_game.start()
th_music.start()
1.2.4 线程的执行顺序
多个线程之间的执行是无顺序的,是由CPU调度决定的执行顺序。线程的结束顺序和进程类似,也是主线程等待子线程结束后才结束。所以也可以设置守护主线程让主线程结束时,子线程也结束。以下为设置的两种方法:
- th_game.daemon = True
- th_music.setDaemon(True)
import os
import threading
import time
def playGame(cont):
for i in range(10):
print(f"正在玩{cont}")
time.sleep(0.6)
def listenMusic(cont):
for i in range(10):
print(f"正在听{cont}")
time.sleep(0.3)
if __name__ == '__main__':
# 创建线程对象
th_game = threading.Thread(target=playGame, args=("元梦之星", ))
th_music = threading.Thread(target=listenMusic, kwargs={"cont": "《萤火飞光》"})
# 设置守护主线程
th_game.daemon = True
th_music.setDaemon(True)
# 启动线程
th_game.start()
th_music.start()
time.sleep(1)
print("主线程结束")
查看当前的线程信息:threading.current_thread()
1.2.5 互斥锁
多个线程之间可以共享全局变量,但是这样会出现一个问题,就是实际产生的数据会和预期的产生偏差。解决方法为:要么合理优化时间,让程序交叉运行,要么使用互斥锁。
互斥锁是对共享数据进行锁定,保证同一时刻只有一个线程去操作。
互斥锁的使用方法:
- 创建互斥锁 my_lock = threadning.Lock()
- 上锁 my_lock.acquire()
- 释放锁 my_lock.relase()
例如:创建两个线程,分别循环累加100万次,最后打印累加次数。
import threading
import time
# 定义全局变量
num = 0
def playGame():
global num
for i in range(1000000):
num += 1
print(num)
def listenMusic():
global num
for i in range(1000000):
num += 1
print(num)
if __name__ == '__main__':
# 创建线程对象
th_game = threading.Thread(target=playGame)
th_music = threading.Thread(target=listenMusic)
# 启动线程
th_game.start()
th_music.start()
正常结果应该是打印2000000
使用互斥锁优化程序:
import threading
import time
# 定义全局变量
num = 0
# 创建锁
my_lock = threading.Lock()
def playGame():
global num
for i in range(1000000):
# 上锁
my_lock.acquire()
num += 1
# 释放锁
my_lock.release()
print(num)
def listenMusic():
global num
for i in range(1000000):
# 上锁
my_lock.acquire()
num += 1
# 释放锁
my_lock.release()
print(num)
if __name__ == '__main__':
# 创建线程对象
th_game = threading.Thread(target=playGame)
th_music = threading.Thread(target=listenMusic)
# 启动线程
th_game.start()
th_music.start()
1.2.6 死锁
死锁是指一直等待对方释放锁的情景,死锁会导致程序无法执行。所以在使用锁的时候,要合理的安排释放。
1.3 进程和线程的区别和联系
举个简单的小例子:ceyyen想和山石和海棠聊天。于是打开了两个聊天软件,这就是打开了两个进程。
第二天,ceyyen还是想和山石和海棠聊天,打开了聊天软件的两个窗口,这就是打开了两个线程。
上述例子中,线程明显节约资源。
进程和线程的联系和区别如下:
- 线程无法独立运行,线程依附于进程,没有进程就没有线程。
- 一个进程可以创建多个线程。
- 进程间不共享全局变量,线程之间共享,但是会有资源竞争,可以使用互斥锁解锁。
- 创建进程的开销比线程大。进程可以使用多核,线程不能使用。
- 进程是操作系统分配的基本单位,线程是CPU调度的基本单位。
2 网络和Socket编程
2.1 网络
网络是实现资源共享和信息传递的虚拟平台。
通过IP可以找到网络中唯一的一台设备,然后与之进行通信。
通过端口号可以找到网络设备种运行的应用程序。
IP地址类型分为IPV4和IPV6,目前使用的主要是IPV4。
在Linux中,可以通过ifconfig命令去查看网卡信息。还可以通过ping命令去检查网络是否连通,以及telnet去检查端口号是否连通。
ping www.baidu.com
telnet 127.0.0.1 8000
2.2 Socket
Socket是程序之间通信的一个工具,遵从TCP传输控制协议。
TCP是面向连接的、可靠的。基于字节流的传输层通信协议。
TCP通信步骤可以总结性的分为3步:
- 创建连接
- 传输数据
- 关闭连接
2.1 TCP客户端
创建一个TCP客户端主要分为以下5步:
- 创建客户端套接字对象
my_client = socket.socket(socket.AF_INET, socket.SOCK_STREAM) # 选择IPV4和TCP协议
- 和服务端套接字建立连接
my_client.connect(("127.0.0.1", 666)) # 以元组的形式传递连接地址和端口
- 发送数据
my_client.send(data.encode("utf-8")) # 以字节的方式将信息转换
- 接收数据
recv_data = my_client.recv(1024).decode("utf-8") # 将接收的数据转换成对应格式的数据
- 关闭套接字
my_client.close()
2.2 TCP服务端
创建一个TCP客户端主要分为以下几步:
- 创建服务端套接字对象
my_server = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
- 设置端口复用
my_server.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, True)
- 绑定IP和端口号
my_server.bind(("127.0.0.1", 666))
- 设置监听
my_server.listen(128) # 128:代表服务端等待排队连接的最大数量
- 等待客户端的连接请求
conn, addr = my_server.accept()
- 接收数据
recv_data = con.recv(1024)
- 发送数据
con.send(data.encode("utf-8"))
- 关闭连接
con.close()
my_server.close()
2.3 聊天功能
利用TCP客户端和TCP服务端可以实现简单的聊天功能。
主要实现思路:
- 服务端循环等待客户端的连接请求
- 服务端/客户端收发信息全为手工输入
- 使用多线程去连接多个客户端