首页
编程
java
php
前端
首页
编程
java
php
前端
网页下翻之后产生新内容,如何实现连续抓包
如图所示,右侧只包含了左侧的前19个视频信息,而我想要获取全部的一百多个视频的信息。随着左侧网页的下拉,会出现新的视频,并出现新的类似的包,同样包含十几个视频信息,但是两个包的URL没有什么规律。可以通过什么方法把这些包都抓出来吗?只能一个一个手动抓包吗?
这种一般是通过分页实现的,你看看请求参数里有没有类似
page: 1
这样的键值对,这个就是控制请求哪一页的
然后改变这个值,循环请求就可以把全部的视频拿到了
点击展开全文