python 3.x 学习笔记17(协程甚至I/O形式)

 网络编程     |      2019-11-26 14:01

1.协程(微线程)
协程是风华正茂种客商态的轻量级线程。
协程具有本身的寄放器上下文和栈。协程调整切换时,将寄放器上下文和栈保存到另内地点,在切回到的时候,恢复生机原先保留的寄放器上下文和栈。由此:

协程能保留上一次调用时的情形(即怀有片段情形的八个特定组合卡塔尔国,每一趟经过重入时,就约等于进入上一回调用的处境,换种说法:进入上一遍离开时所处逻辑流的岗位。

2.greenlet模块
greenlet是一个用C实现的协程模块,相比较与python自带的yield,它能够让你在大肆函数之间自由切换,而不需把这几个函数先证明为generator

例子

from greenlet import greenlet

def fun1():
    print(6)
    gar2.switch() #转换到gar2
    print(58)

def fun2():
    print(54)
    gar1.switch()


gar1 = greenlet(fun1) #启动协程
gar2 = greenlet(fun2)
gar1.switch()

 

3.gevent模块
python 3.x 学习笔记17(协程甚至I/O形式)。gevent 是三个第三方库,可以轻松通过gevent实现产出同步或异步编制程序,在gevent中用到的要害形式是Greenlet, 它是以C增加模块形式接入Python的轻量级协程。 格林let全部运作在主程序操作系统进度的内部,但它们被合营式地调治。

import gevent

def fun1():
    print('第一次运行fun1')
    gevent.sleep(2)           #切换到fun2的gevent.sleep(1)这一步
    print('第二次运行fun1')
def fun2():
    print('第一次运行fun2')
    gevent.sleep(1)            #sleep时间没到继续切换到fun3的gevent.sleep(2)
    print('第二次运行fun2')
def fun3():
    print('第一次运行fun3')
    gevent.sleep(2)
    print('第二次运行fun3')

gevent.joinall( [
    gevent.spawn(fun1),
    gevent.spawn(fun2),
    gevent.spawn(fun3),
])

结果

第一次运行fun1
第一次运行fun2
第一次运行fun3
第二次运行fun2
第二次运行fun1
第二次运行fun3

 

4.gevent默许检查评定不了urllib的i/o操作

 

5.要异步操作爬虫,必得抬高monkey.patch_all(),意思是把当前景序的全数的io操作单独做上标识

from urllib import request
import gevent,time
from gevent import monkey
monkey.patch_all() #把当前程序的所有的io操作单独做上标记
def f(url):
    print('GET%s'%url)
    resp = request.urlopen(url)
    data = resp.read()
    print('%d 数据接收来自%s.' % (len(data), url))

start_time = time.time()
gevent.joinall([
    gevent.spawn(f, 'https://www.python.org/'),
    gevent.spawn(f, 'https://www.baidu.com/'),
    gevent.spawn(f, 'https://github.com/'),
])
print('总共时间:',time.time()-start_time)

 

6.事件驱动模型
时下好多的UI编制程序都以事件驱动模型,如比很多UI平台都会提供onClick()事件,这些事件就意味着鼠标按下事件。事件驱动模型概略思路如下:
  1卡塔 尔(阿拉伯语:قطر‎. 有三个风云(音讯卡塔 尔(阿拉伯语:قطر‎队列;
  2. 鼠标按下时,往这一个队列中加进多少个点击事件(音信卡塔尔;
  3卡塔 尔(英语:State of Qatar). 有个巡回,不断从队列抽出事件,依照差别的事件,调用分裂的函数,如onClick()、onKeyDown()等;
  4卡塔尔. 事件(音信卡塔尔平日都分别保存各自的管理函数指针,那样,每一个音讯都有单独的管理函数;

7.事件驱动编制程序是风流洒脱种编制程序范式,这里前后相继的实行流由外界事件来调节。它的风味是包含二个平地风波循环,当外界事件发生时使用回调机制来触发相应的拍卖。其它三种常见的编制程序范式是(单线程卡塔尔同步以致多线程编制程序。

8.缓存 I/O 

  缓存 I/O 又被称作规范 I/O,大多数文件系统的默许 I/O 操作都以缓存 I/O。在 Linux 的缓存 I/O 机制中,操作系统会将 I/O 的多寡缓存在文件系统的页缓存( page cache 卡塔尔中,相当于说,数据会先被拷贝到操作系统内核的缓冲区中,然后才会从操作系统内核的缓冲区拷贝到应用程序的地点空间。

缓存 I/O 的缺点
  数据在传输进度中需求在应用程序地址空间和水源进行频仍多少拷贝操作,那个数据拷贝操作所推动的 CPU 甚至内部存款和储蓄器费用是格外大的。

注释:此缓存 I/O 在linux碰到下的I/O
详解:

9.IO模式

阻塞 I/O(blocking IO)
非阻塞 I/O(nonblocking IO)
I/O 多路复用( IO multiplexing卡塔 尔(阿拉伯语:قطر‎
非确定性信号驱动 I/O( signal driven IO卡塔尔
异步 I/O(asynchronous IO)

上一篇:没有了 下一篇:没有了