scrapy数据没办法导出的几种情况

控制台正常输出爬取结果但不生成导出文件

（1）程序中引入了scrapy.cmdline.execute导致无法导出

1.  
   from scrapy.cmdline import execute
2.  
    
3.  
   """
4.  
   代码段
5.  
   """
6.  
    
7.  
   execute(['scrapy', "crawl", "xxx_spider"])

解决办法：execute用来debug，当命令行执行命令时删掉，否则不会导出数据。

控制台不输出爬取结果，生成导出文件但没有数据

（1）items程序中字段出现问题

1.  
   # items.py
2.  
    
3.  
   import scrapy
4.  
    
5.  
    
6.  
   class Item(scrapy.Item):
7.  
   # define the fields for your item here like:
8.  
   # name = scrapy.Field()
9.  
   company_regions = scrapy.Field() #公司区域
10.  
    company_name = scrapy.Field() #公司名称
11.  
    # company_description = scrapy.Field() #公司介绍
12.  
    company_url = scrapy.Field() #网站地址

1.  
   # xx_spider.py
2.  
    
3.  
   """
4.  
   代码段
5.  
   """
6.  
   huangye_item['company_region'] ......
7.  
   ......

解决办法：字段名保持一致

这篇好文章是转载于：学新通技术网