红联Linux门户
Linux帮助

webmagic 0.3.1发布,若干bug修复

发布时间:2013-09-09 09:05:27来源:红联作者:empast
webmagic的是一个无须配置、便于二次开发的爬虫框架,它提供简单灵活的API,只需少量代码即可实现一个爬虫。

更新内容如下:

修复了0.3.0版本中,注解模式的空指针错误,感谢@cmlq 发现问题;
为Spider增加了start和stop方法,达到控制Spider运行时间的效果;
修复了一个相对地址转换的bug。
增加了单元测试,保证核心流程的正常工作。

PS: 作者其实不太好意思发这条新闻,因为有一个核心功能:注解模式在0.3.0中是不可用的,这个版本主要修复这个问题。webmagic都是业余时间在维护,时间有限,但是这不是质量低下的借口。在0.3.1版本补全了一些测试,保证核心功能是可用的。希望大家积极反馈问题!

来自:开源中国社区
文章评论

共有 0 条评论