使用c#爬虫时,网页传回:远程服务器返回错误: (600) Unassigned。百度说600是源站没有返回响应头部,只返回实体内容,为啥会出现这种情况
600应该是自定义的错误头吧,浏览器直接访问页面会报错吗?不报错就是对方无服务器加了反扒检查,题主爬网页的时候加上user-agent,Referer之类的请求头。
特别是直接请求数据接口的话,可能还有会其他的一些附加请求头要加上才能正常获取数据