Python多处理:工作程序池与进程

我有一个不平衡的机器人,需要扩展。 该机器人的主要功能是从第三方网站获取数据,并保留一个包含会员信息的数据库。 这两个操作非常耗时,我希望每个操作都有一个单独的工作程序/进程。

我的限制:

  • 第三方网站每分钟的GET数量是有限的。
  • 同一行会不能同时访问数据库

我一直在在线研究实现此目的的最佳方法,但是我进入了几种库/方式来实现这种解决方案。我有哪些选择以及它们的优缺点?

相关文章

功能概要:(目前已实现功能)公共展示部分:1.网站首页展示...
大体上把Python中的数据类型分为如下几类: Number(数字) ...
开发之前第一步,就是构造整个的项目结构。这就好比作一幅画...
源码编译方式安装Apache首先下载Apache源码压缩包,地址为ht...
前面说完了此项目的创建及数据模型设计的过程。如果未看过,...
python中常用的写爬虫的库有urllib2、requests,对于大多数比...