写的 python爬虫,这两天发现 一个问题:都是同样的代码,也是抓取 同一个公众号的 同一篇文章,每次运行标题都能取到,点赞数,阅读数的话 不是每次运行都能获取到。请教大神们 会是什么问题?
看看是不是异步加载的,延迟过短没有来得及返回。加上延迟看看。
谢谢你的回答。我现在设置的 每次访问一篇文章时sleep 1s-3s,有时也还会出现这问题。我再给每页也设置个sleep 试试
是否使用了代理?其实你可以在失败的时候打印出网页的源码,看一下是服务器返回的问题,还是程序的问题。