我爱占星网 我爱占星网
首页
编程
java
php
前端
首页 编程 java php 前端

scrapy 设置随机请求头一直出现TCP connection timed out: 10060:。。。。连接尝试失败

我用自己的ip地址还是有问题,我把中间件去掉可以正常爬取

import random
class SpiderMiddleware(object):
    def process_request(self,request,spider):
        proxy =[
            '223.104.21.84',
            '123.123.54.43:8060',
            '125.120.0.43:8060',
            '114.228.108.13:8060'
        ]
        ip = random.choice(proxy)
        print(ip)
        request.meta['proxy'] = 'http://' + ip
```![图片说明](https://img-ask.csdn.net/upload/201908/12/1565604721_140653.png)

https://blog.csdn.net/weixin_43256057/article/details/90598822

近期文章

  • c++ 如何完成以下转换
  • 关于vue+springboot的端口的问题
  • 请问这个程序怎么改正确😭
  • 关于域账号问题求解惑
  • MATLAB求初值问题,编程
  • c语言运行该程序无论输入什么,输出结果都是一样的。
  • java私有方法的几个问题
  • 前端浏览器控制台报错
  • hellow world自学实在不知道错在哪哭了勿喷
  • JAVA使用mybatis往mysql数据库添加记录成功但是返回nu'l'l
  • vue前端小更改,根据条件隐藏
  • 下载ubuntu的时候电脑很卡很卡
  • 调查月收入 包括家庭成员姓名和月收入
  • 小程序前端两处文字变成undefined
  • spyder显示目录名称无效怎么办啊
  • 关于Jmail中的POP3问题
  • eclipse 输出报错
  • Web前端 怎样把小人图标移到请登录的左边
  • 怎么在Linux或是vbox安装模拟器来安装img文件
  • 求数学大神解答,这个Camera客观测试结果得分是怎么计算出来的?

Copyright ©2022 我爱占星 All Rights Reserved.

浙ICP备2022030071号-1

部分图文来自网络,如有侵犯您的版权,请告诉我们删除

友情链接:代码精华