scrapy爬虫,按照教程,为什么没有生成对应的html文件?

教程地址:https://www.runoob.com/w3cnote/scrapy-detail.html

# -*- coding: utf-8 -*-
import scrapy


class ItcastSpider(scrapy.Spider):
    name = 'itcast'
    allowed_domains = ['itcast.cn']
    start_urls = ['http://itcast.cn/']

    def parse(self, response):
        filename = "teacher.html"
        open(filename,"w").write(response.body)

scrapy crawl itcast 之后文件夹下什么都没有生成,也没有报错,
我用的python版本为3.7

别信什么要加UA的,进去就是坑了。问题就是open(filename,"w").write(response.body)这句,将w改成wb即可

写一个绝对路径,比如 x:\\path\\teacher.html 看看

需要在request里配置,user-agent

不出意外的话我们看的是一个课程 我与你的问题一样 你怎么解决的 可以告诉我吗

可能是 Robot协议 的问题吧,把settings.py文件下的 ’ROBOTSTXT_OBEY = True‘ 改成 ’ROBOTSTXT_OBEY = False‘