特牛网址导航

Python分布式进程使用(Queue和BaseManager使用)-CSDN博客

网友收藏
文章浏览阅读9.5k次,点赞30次,收藏93次。分布式进程需要模块multiprocessing和queue模块使用BaseManager创建分布式管理器使用Queue创建队列,用于多个进程之间的通信分布式进程原理managers子模块支持把多个进程分布到多台机器上可以写一个服务进程作为调度者,将任务分布到其它多个进程中,然后通过网络通信进行管理比如爬取图片:一般一个进程负责抓取图片的地址,将地址放在Queue(容器)队列..._basemanager
标签:basemanager