如何使用网络爬虫获得公开信息

利用spyder从https://www.zhifang.com/project/03sd100010300000000.html爬取楼盘名称，楼盘区域，楼盘地址和楼盘价格等信息，具体Python代码是什么。类似于import requests
import parsel
import csv
f = open('房产数据.csv', mode='a', encoding='utf-8-sig', newline='')
csv_writer = csv.DictWriter(f, fieldnames=['标题', '房产状态', '售房面积', '户型', '开盘时间', '出售时间', '地址', '售价', '预计总价'])
csv_writer.writeheader()

for page in range(1, 84):
print('正在爬取第{}页的数据'.format(page))
url = 'https://shenzhen.qfang.com/newhouse/list/n%7B%7D'.format(page)

打开浏览器调试界面，找到对应的请求，获得请求体就可以了。

import requests
res＝requests.get(url)