首页
编程
java
php
前端
首页
编程
java
php
前端
python scrapy框架爬虫问题 求解答
我的代码如图,当phone_url重复,其他数据也会重复
下面爬取的内容,求解当phone_url重复是,其他数据不重复
scrapy的调度有校验机制
重复的url会过滤掉
点击展开全文