爬取社交App的信息,如注册用户的昵称、头像、评论等,语言不限,只要能抓取到即可。应用场景:就是用一部手机,开始爬取,可在手机上安装插件。
应该不行,爬虫一般应用于网页的内容爬取,app类怕爬取不到吧,而且爬虫都是爬取到网页然后进行网页分析获取到数据的。。
还有其他办法吗~~~~
项目已完成,基于scrapy 改造的分布式爬虫。