Ebot 分布式网页爬虫

程序名称：Ebot

授权协议: GPLv3

操作系统: 跨平台

开发语言: ErLang

Ebot 介绍

Ebot 是一个用 ErLang 语言开发的可伸缩的分布式网页爬虫，URLs 被保存在数据库中可通过 RESTful 的 HTTP 请求来查询。

Ebot 官网

http://www.redaelli.org/matteo/blog/projects/ebot