使用scrapy框架爬取多个网站时出现302重定向
现象:
当多个https网站时,没有使用cookie不会出现302,成功爬取
当爬取一个http网站(http://+ip:端口)时,使用cookie登录爬取不会出现302,成功爬取
当爬取多个http(http://+ip:端口)时,则出现302(2个网站,却只成功爬取最后一个网站,第一个却出现302)
爬取多个http时使用cookie了么?是不是有重复的http
您好,我是有问必答小助手,您的问题已经有小伙伴解答了,您看下是否解决,可以追评进行沟通哦~
如果有您比较满意的答案 / 帮您提供解决思路的答案,可以点击【采纳】按钮,给回答的小伙伴一些鼓励哦~~
ps:问答VIP仅需29元,即可享受5次/月 有问必答服务,了解详情>>>https://vip.csdn.net/askvip?utm_source=1146287632