Nova中的协同并发-Meetup.PDF

Nova中的协同并发 郭⻓波 eric.guo@ ⼤纲 • Python中的并发 • 协程实现eventlet • Nova中的协同并发 © 2014 EasyStack Technologies Inc. Python中的并发 • 进程 multiprocessing/subprocess • 线程 threading/thread • 协程(Coroutines) eventlet/Twisted/Tulip/asyncio © 2014 EasyStack Technologies Inc. 协程介绍 • 每个协程都有⾃⼰的私有stack及局部变量； • 同⼀时间内线程内只有⼀个协程在运⾏， ⽆须对某些共享变量加锁； • 协程之间的执⾏顺序，完全由程序来控制； • 是⼀种概念，⾮操作系统可⻅，在多种语⾔中实现， Python中实现之⼀eventlet /wiki/Coroutine © 2014 EasyStack Technologies Inc. ⼤纲 • Python中的并发 • 协程实现eventlet • Nova中的协同并发 © 2014 EasyStack Technologies Inc. greenlet介绍 • stackless 的副产品 以 Python C 扩展模块⽅式提供 • 实现独⽴的tasklet • tasklet ⾮抢占需要明确调度 • tasklet 存在于线程中，操作系统 不可⻅ • 通过栈拷⻉实现tasklet切换 /en/latest/ © 2014 EasyStack Technologies Inc. Eventlet介绍 • 由second life开源的⾼性能⺴络库 • 基于greenlet • 通过patch 标准模块实现协程 • 对greenlet封装，提供GreenThread • 内部使⽤timer实现greenlet调度器 • 内部main loop 循环通过最⼩堆查找应该执 ⾏的greenlet • 需要程序最开始import eventlet © 2014 EasyStack Technologies Inc. Eventlet介绍 • 主要API Greenthread 产⽣ spawn(func, *args, **kwargs) spawn_n(func, *args, **kwargs) spawn_after(seconds, func, *args, **kwargs) Greenthread 控制 sleep(seconds=0) eventlet.GreenPool running() free() spawn() spawn_n()