javascript – 带旋转代理的Phantom.js / Casper.js?

我有一个简单的目标:使用phantom.js(开箱即用)或casper.js(更好更容易)加载网页,但如果当前的错误(即网页加载失败或类似情况)使用代理并从列表中旋转它那).

我知道casper.js有–proxy param但它指示用户只指定一个代理并在运行时使用它.

问题#1是:如何以编程方式动态旋转代理?

我做了一些研究,发现这个node-requester,但它没有与casper.js集成.我试图在code提取出代理功能但是并没有真正理解它是如何工作的(我猜我不是那么聪明).

所以问题#2:是否有一些简单的代理轮换实现,可以与phantom.js或casper.js一起使用?

我更喜欢使用花哨的casper.js,但也会使用phantom.js.

解决方法

我曾经有同样的问题,我曾与PhantomJS合作过.我们最终得到的解决方案是将PhantomJS作为较大Java / Scala服务器的子进程运行,然后处理失败并在需要时分配不同的代理(通过在-proxy arg中重新运行不同的params).

相关文章

前言 做过web项目开发的人对layer弹层组件肯定不陌生,作为l...
前言 前端表单校验是过滤无效数据、假数据、有毒数据的第一步...
前言 图片上传是web项目常见的需求,我基于之前的博客的代码...
前言 导出Excel文件这个功能,通常都是在后端实现返回前端一...
前言 众所周知,js是单线程的,从上往下,从左往右依次执行,...
前言 项目开发中,我们可能会碰到这样的需求:select标签,禁...