我爱占星网 我爱占星网
首页
编程
java
php
前端
首页 编程 java php 前端

python爬虫遇到重定向,请问应该怎么解决?每次都要手动获取一个cookie的值,怎样可以自动获取?

每次都要修改代码里的这个cookie才能继续执行程序,应该是登录这个网页是进行了重定向,然后有没有一个好的方法可以解决这个问题,或者是我怎么去获取网页登录之后GET包里面的cookie

img

参考:Python requests库获取重定向跨域url及url中的cookie

Python requests库获取重定向跨域url及url中的cookie_PaiDaMoster的博客-CSDN博客_python requests 获取重定向的url 最近公司要往一个网页上提交数据,所以直接用爬虫做接口了,当我登录完成后发现,网址不一样了而且用同样的session提交不了数据, 用抓包工具进行抓包发现是重定向了 而且不是一个,重定向了三个。3个公司的代码拼出了一套网页项目 ???? 。废话不多说,上代码:# 获取请求url域名def getHost(url): pattern = re.compile(r'(.*?)://(.*?)/', re.S) response = re.search(pattern, url) https://blog.csdn.net/PaiDaMoster/article/details/109175740

近期文章

  • 无法运行不知道怎么修改
  • React useState怎么修改数组中某个对象里的某个值
  • HDLBits双边沿触发器
  • python安装第三方库后没有办法用
  • sql数据库,查询每个学生数学成绩时间最新的那一笔记录,求帮助!
  • Oracle数据库,为什么两个表交叉连接查询,只返回一部分数据?
  • c语言中判断语句if中的printf打印不出东西
  • AndroidTest单元测试,Run后在控制台不展示Test Result的结构
  • 激活函数为什么会减少通道数?
  • stm32f103控制步进电机,用编码器如何实现位置闭环?编码器的Z相需要接入检查吗?过圈怎么记?
  • pycharm不能直接pip
  • c# uwp串口通信 SerialDevice.FromIdAsync取得null 加了Package.appxmanifest也没有用
  • 怎么使用avx512,具体函数我差不多了解了,VS需要什么版本?需要什么头文件?预编译头#ifdef怎么写?
  • C++:如何输出地偶数个数
  • 富文本编辑器 文字下面的波浪线或者小点点怎么做
  • 我用那个快手极速版的时候也会提现。提现支付宝他还没有绑定,我去绑定,他说那个验证码我就弄了,结果那个我那个手机号所发出来的那个手机。验证码的手机号
  • 用matlab做数据的聚类分析时,运行结果的样本量少了
  • 打包出现错误,该如何解决!
  • Python初学者的问题,望解答
  • 有什么软件可以把普通视频转换成AMV格式的

Copyright ©2022 我爱占星 All Rights Reserved.

浙ICP备2022030071号-1

部分图文来自网络,如有侵犯您的版权,请告诉我们删除

友情链接:代码精华