python3.7,使用request基础爬虫可以爬到数据,用scrapy爬出内容为空,使用同样的xpath语法。亲手纠正错误!
items文件
spider文件
pipelines文件
setting文件
这不是可以请求下来页面吗。。
您这问题是说xpath不好使吗?
spider文件 里面的 parse方法中 item=TencentItem()实例应该放在for循环外面吧
response.xpath('//li/div/div[2]/strong/i/text()').extract()
response.xpath('//div[@class="p-name p-name-type-2"]/a/@href').extract()
response.xpath('//div[@class="p-name p-name-type-2"]/a/em').xpath('string(.)').extract()
试下这几个xpath看看