在一个Py程序中,我把200个买的代理(快代理)放到text里然后转为py列表,用random随机数来提取,可不论怎么说,比如爬了60来次,就不行了,或者10几次,甚至几次,我认为是代理质量问题,不知道怎么解决了,要定时换一批,根本无法自动化,怎么办,每次一卡壳就要重新运行,擦
使用try catch维护,发现疑似失效ip就给个对应标记,标记达到一定数量就删除对应ip
按顺序或者random取都可以, 被封了就换一个呀,
二楼正解,加个判断响应回来的状态码或者内容不是正常的响应,就调用get ip的方法重新切换一个代理去请求。
弄一个代理池吧