scrapy框架下载图片

• 步骤
  • 第一步设置图片存储路径
  • 第二步管道中定义图片下载类
  • 第二步重写get_media_requests方法
  • 第三步重写item_completed方法

步骤

第一步：设置图片存储路径

• 必须为(IMAGES_STORE)
  

第二步：管道中定义图片下载类

第二步：重写get_media_requests()方法

• 此方法返回图片链接，框架会自动下载图片,前提必须有图片存储路径，不然没法下载

第三步：重写item_completed()方法

• 从setting中获取数据，导入方法：
• 
• 获取路径
  
• 通过os模块更新每个图片路径，并定义图片地址字段
  
  • 注意：result返回值为一个列表，里面是元祖
  • os.sep:返回“/”