python如何爬取非www.开头的网页

目标网页:https://axrc.hellolocallife.com/188pvc

目的:爬取该页面的所有图片

 

我是用requests库和BeautifulSoup库来爬取,但是无法找到img标签,特来求问

 

 

它这个网站估计是用vue构建的,JS动态加载的网页肯定没办法用一般的requests库来爬取的。

可以考虑使用selenium库

它这个网站数据是异步加载的,数据通过JS渲染上去

所以请求 https://axrc.hellolocallife.com/188pvc 获取不到加载后的源代码

你可以通过浏览器控制台抓包查看接口,网络-> XHR 找加载图片数据的接口

通过接口请求数据