Web爬虫框架 Scrapy

发布时间:2012-08-14 15:28:54来源:红联作者:empast

Scrapy 是一套基于基于Twisted的异步处理框架，纯python实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。

主页：http://scrapy.org/

下载：http://scrapy.org/download/

来自:开源中国社区