pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?
大家讲道理
大家讲道理 2016-11-12 11:22:38
0
2
704

pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?现在正在做scrapy到pyspider的迁移

大家讲道理
大家讲道理

光阴似箭催人老,日月如移越少年。

全部回复(2)
代言

和网页一样 self.crawl(image_url, callback=self.image_save) 提交抓取,写一个 image_save 将 response.content 写到你需要的地方即可。

如果是大规模图片下载,建议单独写一个下载器。


代言

好像没有这个功能图片用 urllib 的 urlretrieve 实现下载到本地?

热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板