自己写的php curl库实现整站克隆功能

有时候经常会用到一些在线手册,比如国内或国外的,有些是访问速度慢,有些是作者直接吧网站关闭了,有些是服务器总是宕机,所以还是全盘克隆到自己服务器比较爽。

库特点:

给定一初始连接,初始链接以下的层级所有文件会拷贝到本地。 多次克隆可以配置是否覆盖。 可以配置是否下载图片。 所有链接替换为相对链接,所以可以随便rewrite。 绝对不会出现文件覆盖等问题。 最NB的特点是,没有比这更NB的库了。

SVN:

编程之家下载:

克隆结果展示(这个克隆操作几秒钟就完成了):

克隆源网站: 克隆结果:

Demo代码

代码如下:
getRequest()->isCli()){ Ares_Http::error403(); } include 'CurlMulti/CurlMulti.PHP'; include 'CurlMulti/MyCurl.PHP'; include 'PHPQuery.PHP'; } }

代码如下:
getAppDirectory () . '/data/manual'; $cacheDir = $this->getBaseDir () . '/cache/curl'; if (! is_dir ( $cacheDir )) { mkdir ( $cacheDir ); } $curl = new CurlMulti (); $curl->maxThread = 10; $curl->cache ['enable'] = true; $curl->cache ['enableDownload'] = true; $curl->cache ['dir'] = $cacheDir; $curl->cache ['compress'] = true; $clone = new MyCurl_Clone ( $curl,$url,$dir ); $clone->overwrite = true; $clone->start (); return false; } }

相关文章

统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返...
统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返...
前言 之前做了微信登录,所以总结一下微信授权登录并获取用户...
FastAdmin是我第一个接触的后台管理系统框架。FastAdmin是一...
之前公司需要一个内部的通讯软件,就叫我做一个。通讯软件嘛...
统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返...