爬取的网页,新加了个登录页面该怎么修改

要爬取的数据,在进入网页前加了个登录的页面。

模拟登录

把你的账号登上去,然后把cookie复制下来,粘到代码中,这样就不用破解登录喽

可以参考下这个,大概有以下几种方法,具体可参考连接。
方法一:直接使用已知的cookie访问
方法二:模拟登录后再携带得到的cookie访问
方法三:模拟登录后用session保持登录状态
方法四:使用无头浏览器访问