中基协网页上有一条私募基金公示,http://gs.amac.org.cn/amac-infodisc/res/pof/fund/index.html,里面包含已经备案的3万多条私募基金的基本信息,它有300多页,每条都复制太麻烦了。如何将全部信息汇总,并将所有公司的注册地址、注册资本信息爬取建立文件。以上为两个需求:1)汇总上述网页所有3万多只基金2)爬取3万只基金的注册地址、注册资本等信息。至少希望解决需求1。
接口这个http://gs.amac.org.cn/amac-infodisc/api/pof/fund?rand=0.6231982027861624&page=0&size=20
post请求这个,同时post发送page和size参数