是这样的,我想对京东,苏宁天猫等电商的价格信息进行实时监控。京东的自营商品信息需要监控的大概70万左右。有什么方法可以达到这个需求?
我找了几个外包公司,都说用爬虫的话难度太大,而且效果可能达不到要求。请大牛们给一下思路,我去给外包公司说。
相关竞品网站有两个,分别是http://www.joyj.com/real/ 和 http://www.yunshenjia.com/home
肯定不是爬虫来实现了,这个属于商业机密,就不要拿来在问答问了。
python爬虫,或者找京东合作,或者是我不知道的什么技术。
牛逼的技术。。京东的数据库直接读取。。。
不牛逼的技术就是网页爬虫。。。简单的还能实现。。