有没有人可以说一下python爬虫能干什么?有代码更好
其实挺多的,你可以上百度搜一下,比如可以爬取网页代码
import requests
# 获取网页源代码
def getHtml(url):
# 发送请求,r:response
res = requests.get(url)
# 判断是否请求成功
if res.status_code == 200:
# 设置编码
res.encoding = res.apparent_encoding
# 获取html文本数据,t:text
return res.text
else:
print('请求失败')
return ''
# 目标网址
url = 'https://www.baidu.com'
html = getHtml(url)
# 输出网页源代码
print(html)
可以干很多事,可批量快速获取数据做数据分析,可以抢票等等
https://blog.csdn.net/qq_57421630/article/details/119152956?utm_source=app&app_version=5.0.1&code=app_1562916241&uLinkId=usr1mkqgl919blen
python爬虫就是机器模拟浏览器,对网页界面进行操作。人打开浏览器能看到的数据,理论上爬虫都可以采集到。用户通过浏览器能做的事情,如打开某个页面,鼠标点击某个位置,比如打卡,下单购买......爬虫理论上也都可以更高效地实现。