爬虫重定向怎么处理？

已经带上随机更换ip、cookies、headers，但是爬到600条再请求就跳到主页了，还有什么处理办法吗？

不知道你这个问题是否已经解决, 如果还没有解决的话:

• 这篇文章：自定义爬虫筛选规则 也许能够解决你的问题，你可以看下

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 以帮助更多的人 ^-^