猎聘网CrawlSpider爬虫,如何爬取翻页URL

问题遇到的现象和发生背景

img

猎聘网对翻页进行了处理,无法直接获取翻页URL,如何用CrawlSpider爬虫中的Rule规制获取呢?或者是其他解决方案

问题相关代码,请勿粘贴截图
运行结果及报错内容
我的解答思路和尝试过的方法
我想要达到的结果

你去看猎聘的翻页URL规则,比较第一页第二页第几页的URL特征

你好,请问你解决了嘛

我也遇到了同样的问题。。。。