网页爬虫 YaCy

发布时间:2012-08-14 15:29:50来源:红联作者:empast

YaCy基于p2p的分布式Web搜索引擎.同时也是一个Http缓存代理服务器.这个项目是构建基于p2p Web索引网络的一个新方法.它可以搜索你自己的或全局的索引,也可以Crawl自己的网页或启动分布式Crawling等.

主页：http://yacy.net/

来自:开源中国社区