scrapy 2.3 启用媒体管道

2021-06-17 11:14 更新

要启用媒体管道,必须首先将其添加到项目中 ​ITEM_PIPELINES​ 设置。

对于图像管道,请使用:

ITEM_PIPELINES = {'scrapy.pipelines.images.ImagesPipeline': 1}

对于文件管道,请使用:

ITEM_PIPELINES = {'scrapy.pipelines.files.FilesPipeline': 1}

注解

您还可以同时使用文件和图像管道。

然后,将目标存储设置配置为用于存储下载的图像的有效值。否则,管道将保持禁用状态,即使将其包含在 ​ITEM_PIPELINES​ 设置。

对于文件管道,设置 ​FILES_STORE​ 设置:

FILES_STORE = '/path/to/valid/dir'

对于图像管道,设置 ​IMAGES_STORE​ 设置:

IMAGES_STORE = '/path/to/valid/dir'
以上内容是否对您有帮助:
在线笔记
App下载
App下载

扫描二维码

下载编程狮App

公众号
微信公众号

编程狮公众号