Python 如何爬取相同url下,多个页面的链接内容,最好附代码看下
多个页面的链接内容?是地址相同?还是一个页面里面包含多个url,你可以先解析相应的url,然后在通过遍历的方式进行爬取。
用scrapy框架直接支持
解析一下url地址,找出规律,如果网页不是特别多,就使用循环