请问我用aiohttp和asyncio写的异步爬虫,为什么运行一段时间后,就会收到超时报错,急。求解答
估计是你的进程阻塞了,做好多进程设计就可以了
超时一般是你请求网站超时,可能是代理质量不好,或者你网络不好,
加个回调函数,如果掉包,应立刻重连。