自动检索 Scrapinghub API 项目

问题描述

我想知道如何自动进行 scrapinghub API 项目检索?如果 job.items(),我似乎找不到如何自动化收集的好方法。 API 是从 Flask 网站调用的。

我尝试设置一个 while 循环,想法是一旦状态更改为 finished 就会检索项目,但这会创建一个很长的过程。

while dict(job.Metadata.iter())['state'] != 'finished':
    pass
for item in job.items.iter(count=100):
    print(item)

关于如何在不创建冗长流程的情况下自动检索作业项的任何其他想法?

谢谢

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)