scrapy 抓不到数据的情况

今天遇到xpath语法正确但抓不到数据。经检查是starturl="https://www..."这里出现问题，有的网站必须是https访问，http则404返回。或都没有写www也可能404

scrapy shell 的时候注意一下会有收获。注意看response