网站首页 > 开源技术 正文
网页一般都有两种请求方式,get和post,简单地说,get方法请求的参数会显示在url上,且传输的数据量有限制,是不安全的,post请求的参数用户都是不可见的,可传输的数据量一般默认是不受限制的。
所以我们在编写网络爬虫时,需要判断是哪种请求方式,然后使用具体的方法,可是我们如何判断是post请求还是get请求呢?其实你想要的浏览器都有了按F12调出调试窗口
可以看到,我们需要的请求方式就在这,这时我们就可以分别对不同的请求方法编写代码了
get请求的例子我们选用的网址是搜狗搜索,输入内容狗
可以看见是get的请求方法,而get请求方式的url带有参数
而只有狗是我们填入的参数,其他都是自动生成的
然后这次就是要使用新的模块requests了,注意:requests模块是需要单独通过pip安装
requests之get方法使用
requests.get()里面的参数,url就是url,params是请求参数,headers是头信息,注意get的请求参数是params
其实好像也没啥好说的,requests的作用就是发送请求给服务器,然后创建一个对象接收响应内容。
requests之post方法使用
随意找了个post请求的
点击下面这个地方Response可以查看网页响应数据
编写代码如下
看懂这些代码应该是很简单的,就不废话了
猜你喜欢
- 2025-06-04 python用requests BeautifulSoup下载网页到txt并去掉html标记
- 2025-06-04 测试进阶:实现跨请求地保持登录的神器session你get了么?
- 2025-06-04 Requestium一个比Requests跟实用的python库
- 2025-06-04 Python模拟登入的N种方式,总有一种方式适合你(建议收藏)
- 2025-06-04 RobotFramework之http接口测试库RequestsLibrary使用介绍(十)
- 2025-06-04 Kafka Producer 参数 max.in.flight.requests.per.connection 配置
- 2025-06-04 如何搭建接口自动化测试框架?(接口自动化测试框架设计)
- 2025-06-04 python编程实践:网络爬虫,从学习Requests 模块开始
- 2025-06-04 一文详解 requests 库中 json 参数和 data 参数的用法
- 2025-06-04 Python-实战-requests库标准入门姿势
你 发表评论:
欢迎- 最近发表
-
- 后端服务太慢?试试这 7 招(后端 服务端 区别)
- 做一个适合二次开发的低代码平台,把程序员从curd中解脱出来-1
- Caffeine缓存 最快缓存 内存缓存(caffeine缓存使用)
- Java性能优化的10大策略(java性能调优从哪几个方面入手)
- New Balance M576PGT 全新配色设计
- x-cmd pkg | qrencode - 二维码生成工具
- 平和精英抽奖概率是多少 平和精英抽奖物品一览
- x-cmd pkg | tmux - 开源终端多路复用器(terminal multiplexer)
- 漫威官方App中文版上线:全站漫画限时免费
- macOS Monterey 12.7.4 (21H1123) 正式版发布,ISO、IPSW、PKG 下载
- 标签列表
-
- jdk (81)
- putty (66)
- rufus (78)
- 内网穿透 (89)
- okhttp (70)
- powertoys (74)
- windowsterminal (81)
- netcat (65)
- ghostscript (65)
- veracrypt (65)
- asp.netcore (70)
- wrk (67)
- aspose.words (80)
- itk (80)
- ajaxfileupload.js (66)
- sqlhelper (67)
- express.js (67)
- phpmailer (67)
- xjar (70)
- redisclient (78)
- wakeonlan (66)
- tinygo (85)
- startbbs (72)
- webftp (82)
- vsvim (79)
本文暂时没有评论,来添加一个吧(●'◡'●)