爬虫程序一直出出现HTTP的407错误

用的java采集大众点评数据,最近换了一家代理商叫亿牛云,我使用的是他们的动态转发代理,根据示例来配置代理信息的,程序运行的时候一却一直报407错误,不知道为什么

很有可能是jdk的值jdk.http.auth.tunneling.disabledSchemes的问题
找到你jdk的安装目录%JAVA_HOME%\jre\lib下的net.properties文件
然后找到jdk.http.auth.tunneling.disabledSchemes将其的值设置未空

是不是因为ip的原因呢?

在使用爬虫多次爬取同一网站时,经常会被网站的IP反爬虫机制给禁掉,如何突破在爬取的过程中限制需要使用到高匿的http。

普通匿名或者透明的ip容易使本机真实ip泄露,反而完不成爬虫工作。选择高匿的http例如IPIDEA还是很有必要的,不仅池量大而且连接稳定带宽高,
保障爬虫工作的顺利完成。