红联Linux门户
Linux帮助

Scrapy 1.4.0发布,Web爬虫框架

发布时间:2017-05-19 09:08:51来源:红联作者:baihuo
Scrapy 1.4.0 发布了,Scrapy 是一套基于 Twisted 的异步处理框架,纯 Python 实现的爬虫框架,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。

Scrapy 1.4 没有带来许多令人惊叹的新功能,但进行了相当多的方便的改进。

Scrapy 现在通过新的 :setting:`FTP_USER` 和 :setting:`FTP_PASSWORD` 设置,支持使用可自定义的用户和密码进行匿名 FTP 会话。

如果使用 Twisted 17.1.0 或更高版本,FTP 现在可以与 Python 3 一起使用。

软件详情:https://github.com/scrapy/scrapy/blob/1.4/docs/news.rst

下载地址:https://scrapy.org/download/

来自:开源中国社区
文章评论

共有 0 条评论