linux
C-haidragon
我的视频学习地址:https://edu.csdn.net/lecturer/5805?spm=1003.2001.3001.4144
展开
-
协程-greenlet版(python 版)
协程-greenlet版为了更好使用协程来完成多任务,python中的greenlet模块对其封装,从而使得切换任务变的更加简单安装方式使用如下命令安装greenlet模块:sudo pip install greenlet#coding=utf-8from greenlet import greenletimport timedef test1(): while原创 2017-10-27 09:33:59 · 607 阅读 · 0 评论 -
多线程-threading和进程VS线程(python 版)
多线程-threadingpython的thread模块是比较底层的模块,python的threading模块是对thread做了一些包装的,可以更加方便的被使用1. 使用threading模块单线程执行#coding=utf-8import timedef saySorry(): print("亲爱的,我错了,我能吃饭了吗?") time.sleep(1)原创 2017-10-25 10:29:32 · 244 阅读 · 0 评论 -
同步的概念(python 版)
同步的概念1. 多线程开发可能遇到的问题假设两个线程t1和t2都要对num=0进行增1运算,t1和t2都各对num修改10次,num的最终的结果应该为20。但是由于是多线程访问,有可能出现下面情况:在num=0时,t1取得num=0。此时系统把t1调度为”sleeping”状态,把t2转换为”running”状态,t2也获得num=0。然后t2对得到的值进行加1并赋给num,使得n原创 2017-10-25 10:38:51 · 345 阅读 · 0 评论 -
互斥锁(python 版)
互斥锁当多个线程几乎同时修改某一个共享数据的时候,需要进行同步控制线程同步能够保证多个线程安全访问竞争资源,最简单的同步机制是引入互斥锁。互斥锁为资源引入一个状态:锁定/非锁定。某个线程要更改共享数据时,先将其锁定,此时资源的状态为“锁定”,其他线程不能更改;直到该线程释放资源,将资源的状态变成“非锁定”,其他的线程才能再次锁定该资源。互斥锁保证了每次只有一个线程进行写入操作,从而原创 2017-10-25 10:40:41 · 995 阅读 · 0 评论 -
多线程-非共享数据(python 版)
多线程-非共享数据对于全局变量,在多线程中要格外小心,否则容易造成数据错乱的情况发生1. 非全局变量是否要加锁呢? #coding=utf-8 import threading import time class MyThread(threading.Thread): # 重写 构造方法 def __init__(self,nu原创 2017-10-25 10:43:07 · 525 阅读 · 0 评论 -
死锁(python 版)
死锁现实社会中,男女双方都在等待对方先道歉如果双方都这样固执的等待对方先开口,弄不好,就分搜了1. 死锁在线程间共享多个资源的时候,如果两个线程分别占有一部分资源并且同时等待对方的资源,就会造成死锁。尽管死锁很少发生,但一旦发生就会造成应用的停止响应。下面看一个死锁的例子#coding=utf-8import threadingimport timeclass原创 2017-10-25 10:52:12 · 693 阅读 · 0 评论 -
同步应用(python 版)
同步应用多个线程有序执行from threading import Thread,Lockfrom time import sleepclass Task1(Thread): def run(self): while True: if lock1.acquire(): print("------Task 1原创 2017-10-25 10:56:27 · 305 阅读 · 0 评论 -
生产者与消费者模式(python 版)
1. 队列先进先出2. 栈先进后出Python的Queue模块中提供了同步的、线程安全的队列类,包括FIFO(先入先出)队列Queue,LIFO(后入先出)队列LifoQueue,和优先级队列PriorityQueue。这些队列都实现了锁原语(可以理解为原子操作,即要么不做,要么就做完),能够在多线程中直接使用。可以使用队列来实现线程间的同步。用FIFO队列原创 2017-10-26 09:23:19 · 4140 阅读 · 0 评论 -
异步(python 版)
异步同步调用就是你 喊 你朋友吃饭 ,你朋友在忙 ,你就一直在那等,等你朋友忙完了 ,你们一起去异步调用就是你 喊 你朋友吃饭 ,你朋友说知道了 ,待会忙完去找你 ,你就去做别的了。from multiprocessing import Poolimport timeimport osdef test(): print("---进程池中的进程---pid=%d,ppid原创 2017-10-26 09:28:32 · 222 阅读 · 0 评论 -
单进程服务器(python版)
单进程服务器1. 完成一个简单的TCP服务器from socket import *serSocket = socket(AF_INET, SOCK_STREAM)# 重复使用绑定的信息serSocket.setsockopt(SOL_SOCKET, SO_REUSEADDR , 1)localAddr = ('', 7788)serSocket.bind(localA原创 2017-10-26 09:32:47 · 323 阅读 · 0 评论 -
多进程服务器(python 版)
多进程服务器1. 多进程服务器from socket import *from multiprocessing import *from time import sleep# 处理客户端的请求并为其服务def dealWithClient(newSocket,destAddr): while True: recvData = newSocket.recv(10原创 2017-10-26 09:33:44 · 792 阅读 · 0 评论 -
多线程服务器(python 版)
多线程服务器#coding=utf-8from socket import *from threading import Threadfrom time import sleep# 处理客户端的请求并执行事情def dealWithClient(newSocket,destAddr): while True: recvData = newSocket.recv(原创 2017-10-26 09:34:53 · 608 阅读 · 0 评论 -
多线程-共享全局变量(python版)
多线程-共享全局变量from threading import Threadimport timeg_num = 100def work1(): global g_num for i in range(3): g_num += 1 print("----in work1, g_num is %d---"%g_num)def work2():原创 2017-10-25 10:34:47 · 1587 阅读 · 0 评论 -
threading注意点(python 版)
threading注意点1. 线程执行代码的封装通过上一小节,能够看出,通过使用threading模块能完成多任务的程序开发,为了让每个线程的封装性更完美,所以使用threading模块时,往往会定义一个新的子类class,只要继承threading.Thread就可以了,然后重写run方法示例如下:#coding=utf-8import threadingimport tim原创 2017-10-25 10:31:42 · 434 阅读 · 0 评论 -
协程-gevent(python版)
geventgreenlet已经实现了协程,但是这个还的人工切换,是不是觉得太麻烦了,不要捉急,python还有一个比greenlet更强大的并且能够自动切换任务的模块gevent其原理是当一个greenlet遇到IO(指的是input output 输入输出,比如网络、文件操作等)操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。原创 2017-10-27 09:35:32 · 2146 阅读 · 0 评论 -
单进程gevent版-TCP服务器(python 版)
gevent版-TCP服务器import sysimport timeimport geventfrom gevent import socket,monkeymonkey.patch_all()def handle_request(conn): while True: data = conn.recv(1024) if not data:原创 2017-10-27 09:38:17 · 713 阅读 · 2 评论 -
单进程select版-TCP服务器(python 版)
select版-TCP服务器1. select 原理在多路复用的模型中,比较常用的有select模型和epoll模型。这两个都是系统接口,由操作系统提供。当然,Python的select模块进行了更高级的封装。网络通信被Unix系统抽象为文件的读写,通常是一个设备,由设备驱动程序提供,驱动可以知道自身的数据是否可用。支持阻塞操作的设备驱动通常会实现一组自身的等待队列,如读/写等待队列用原创 2017-10-26 09:37:39 · 480 阅读 · 0 评论 -
单进程epoll版-TCP服务器(python 版)
epoll版-TCP服务器1. epoll的优点:没有最大并发连接的限制,能打开的FD(指的是文件描述符,通俗的理解就是套接字对应的数字编号)的上限远大于1024效率提升,不是轮询的方式,不会随着FD数目的增加效率下降。只有活跃可用的FD才会调用callback函数;即epoll最大的优点就在于它只管你“活跃”的连接,而跟连接总数无关,因此在实际的网络环境中,epoll的效率就会远远高原创 2017-10-26 09:39:25 · 578 阅读 · 0 评论 -
多任务实现-协程(python 版)
协程协程,又称微线程,纤程。英文名Coroutine。协程是啥首先我们得知道协程是啥?协程其实可以认为是比线程更小的执行单元。 为啥说他是一个执行单元,因为他自带CPU上下文。这样只要在合适的时机, 我们可以把一个协程 切换到另一个协程。 只要这个过程中保存或恢复 CPU上下文那么程序还是可以运行的。通俗的理解:在一个线程中的某个函数,可以在任何地方保存当前函数的一些临时变量等信息原创 2017-10-26 09:41:10 · 572 阅读 · 0 评论 -
进程的创建-fork(python版)
进程的创建-fork1. 进程 VS 程序编写完毕的代码,在没有运行的时候,称之为程序正在运行着的代码,就成为进程进程,除了包含代码以外,还有需要运行的环境等,所以和程序是有区别的2. fork( )Python的os模块封装了常见的系统调用,其中就包括fork,可以在Python程序中轻松创建子进程: import os # 注意,fork函数,只原创 2017-10-24 12:57:04 · 322 阅读 · 0 评论 -
多进程修改全局变量(python版)
#coding=utf-8import osimport timenum = 0# 注意,fork函数,只在Unix/Linux/Mac上运行,windows不可以pid = os.fork()if pid == 0: num+=1 print('哈哈1---num=%d'%num)else: time.sleep(1) num+=1 p原创 2017-10-24 12:59:20 · 8641 阅读 · 0 评论 -
多次fork问题(python 版)
如果在一个程序,有2次的fork函数调用,是否就会有3个进程呢?#coding=utf-8import osimport time# 注意,fork函数,只在Unix/Linux/Mac上运行,windows不可以pid = os.fork()if pid == 0: print('哈哈1')else: print('哈哈2')pid = os.fork(原创 2017-10-24 13:01:11 · 1157 阅读 · 0 评论 -
multiprocessing(python 版)
multiprocessing如果你打算编写多进程的服务程序,Unix/Linux无疑是正确的选择。由于Windows没有fork调用,难道在Windows上无法用Python编写多进程的程序?由于Python是跨平台的,自然也应该提供一个跨平台的多进程支持。multiprocessing模块就是跨平台版本的多进程模块。multiprocessing模块提供了一个Process类来代表原创 2017-10-24 13:05:25 · 608 阅读 · 0 评论 -
进程的创建-Process子类(python 版)
进程的创建-Process子类创建新的进程还能够使用类的方式,可以自定义一个类,继承Process类,每次实例化这个类的时候,就等同于实例化一个进程对象,请看下面的实例:from multiprocessing import Processimport timeimport os#继承Process类class Process_Class(Process): #因为Proce原创 2017-10-24 13:10:19 · 2228 阅读 · 0 评论 -
进程池Pool(python版)
当需要创建的子进程数量不多时,可以直接利用multiprocessing中的Process动态成生多个进程,但如果是上百甚至上千个目标,手动的去创建进程的工作量巨大,此时就可以用到multiprocessing模块提供的Pool方法。初始化Pool时,可以指定一个最大进程数,当有新的请求提交到Pool中时,如果池还没有满,那么就会创建一个新的进程用来执行该请求;但如果池中的进程数已经达到指定的原创 2017-10-25 10:24:24 · 1186 阅读 · 0 评论 -
进程间通信-Queue(python版)
进程间通信-QueueProcess之间有时需要通信,操作系统提供了很多机制来实现进程间的通信。1. Queue的使用可以使用multiprocessing模块的Queue实现多进程之间的数据传递,Queue本身是一个消息列队程序,首先用一个小实例来演示一下Queue的工作原理:#coding=utf-8from multiprocessing import Queueq=Queu原创 2017-10-25 10:26:32 · 650 阅读 · 0 评论 -
单进程服务器-非堵塞模式(python版)
单进程服务器-非堵塞模式服务器#coding=utf-8from socket import *import time# 用来存储所有的新链接的socketg_socketList = []def main(): serSocket = socket(AF_INET, SOCK_STREAM) serSocket.setsockopt(SOL_SOCKET,原创 2017-10-26 09:36:05 · 364 阅读 · 0 评论