推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 2919 天前的主题，其中的信息可能已经有所发展或是发生改变。
用 Scrapy 框架开发爬虫，按照一般的规范，对图片进行下载并保存的操作是不是应当放在 pipelines.py 中实现呢？
谢谢
谢谢
 | 1 misaka19000 2017-10-19 22:46:28 +08:00 是的 |
 | 2 saximi OP @misaka19000 谢谢！ |
 | 3 sunwei0325 2017-10-20 12:58:27 +08:00 |
| 4 saximi OP 2017-10-20 22:11:39 +08:00 @misaka19000 爬虫下载图片的做法，是不是最好用的还是 urllib 模块和以下的步骤？ req=urllib.request.Request(imageURL) respOnse=urllib.request.urlopen(req) data=response.read() |
| 5 saximi OP @sunwei0325 谢谢，我去学习学习 |
| 6 saximi OP @sunwei0325 请教，这个例子中的 get_media_requests(self,item,info)方法，info 参数是怎么个用法呢？谢谢 |
| 7 sunwei0325 2017-10-25 06:34:42 +08:00 @saximi 没什么用, 兼容旧版本的 |
Select Language