python3.8 requests
import requests
url = "https://m.tb.cn/h.fOfNjKl?tk=UWkp2WfG1Iy%22
respon = requests.get(url)
print(respon.url)
https://m.tb.cn/h.fOfNjKl?tk=UWkp2WfG1Iy
借助正则通过get获取跳转的url,然后用selenium模拟点击关闭弹窗,再获取标签内文本信息即可。
import requests
import re
url = "https://m.tb.cn/h.fOfNjKl?tk=UWkp2WfG1Iy"
respon = requests.get(url,allow_redirects=False)
print(respon.url)
print(re.findall('var url = \'(.*)\';',respon.text)[0])
淘宝的都有反爬虫的,你要设置cookies和请求头
您好,我是有问必答小助手,您的问题已经有小伙伴帮您解答,感谢您对有问必答的支持与关注!