问题描述
我有一个Lua脚本,它将通过一个Java脚本沉重的网页。代码类似于:
- 通过表单输入信息
- 设置页面的一些设置
- 在行中循环
- 重复浏览页面
或者,我可以为每个页面使用一个Splash脚本,并为每个页面从头到尾重复该脚本。其中包括步骤1和2。
使用包含单个Splash脚本的重复scrapy解析方法在页面之间循环。对于每个页面,使用启动脚本运行parse方法:
- 通过表单输入信息
- 设置页面的一些设置
- 在行中循环
我觉得标准分页无法正常工作,因为URL不会在页面之间变化。因此,如果要使用循环浏览特定的页码,则必须导航到该页码 不仅刮擦而且飞溅,而不仅仅是飞溅。
有什么想法更有效?
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)