有关爬虫遇到反爬的问题

用爬虫爬取如下网址遇到反爬,用request直接拒绝访问403,请问该如何解决?
https://cn.investing.com/currencies/xbr-usd-historical-data

headers信息可以追加看看,有可能缺少字段反爬了

如果headers和cookies确认都加上了还是有问题,那么是试试加上代理

headers和cookies更换,还有就是代理ip池,如果不更换就自己一个ip很容易被检测出来,或者机房就会检测出来拉黑

使用你自己电脑的ip进行访问看有没有做频率限制。(一般有30秒防更新)