首页
编程
java
php
前端
首页
编程
java
php
前端
爬虫如何判断什么时候直接解析,什么时候需要抓包之类的操作?
关于爬虫想提一个问题,有的网站可以直接使用页面的网址,有一些却需要在network里面搜索,然后进行抓包。想请问如何判断什么时候可以直接request网址内容,然后解析,什么时候需要抓包操作?
打开网页源代码,如果数据能加载出来,则不需要抓包
如果数据信息加载不出来,则需要查看network,看看调用的接口里面是否返回
如果在调用的接口里面查询不到数据,则需要抓包查看
点击展开全文