利用get方法会弹出重新定向超过三十个的错误
然后加入
allow_redirects=False
返回如下
<html>
<head><title>301 Moved Permanently</title></head>
<body>
<center><h1>301 Moved Permanently</h1></center>
<hr><center>openresty</center>
</body>
</html>
并没有任何没有链接...
然后查了一下这个openresty
一个高并发服务器
然后就没有然后了
当然浏览器是正常显示的
网站是个discuz论坛
该怎做才能爬这个网站...
https://blog.csdn.net/weixin_34178244/article/details/90776419