📌  相关文章
📜  Scrapy-定义项目

📅  最后修改于: 2020-10-31 14:38:00             🧑  作者: Mango

描述

项目是用于收集从网站抓取的数据的容器。您必须通过定义商品来启动蜘蛛。要定义项目，编辑items.py文件目录下first_scrapy(自定义目录)中。 items.py如下所示-

import scrapy  

class First_scrapyItem(scrapy.Item): 
   # define the fields for your item here like: 
      # name = scrapy.Field()

MyItem类从Item继承，该Item包含Scrapy已经为我们构建的许多预定义对象。例如，如果要从站点提取名称，URL和描述，则需要为这三个属性中的每一个定义字段。

因此，让我们添加我们要收集的项目-

from scrapy.item import Item, Field  

class First_scrapyItem(scrapy.Item): 
   name = scrapy.Field() 
   url = scrapy.Field() 
   desc = scrapy.Field()