想爬取瀑布流布局里的大量数据,但是有api限制,并且网页无法获取交互信息,有什么解决办法吗?
瀑布流一般是通过接口加载数据,直接请求接口获取数据就行了。只要是浏览器访问能加载出来的一般都可以获取到,只是难易程度不一样而已。
比如有一些js生成的签名,如果js压缩过很难分析签名生成过程,可以考虑用selenium来采集。