python模块04-requests

2024-08-26 06:44
文章标签 python 模块 04 requests

本文主要是介绍python模块04-requests,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1 requests模块发送请求

Requests是一个Python HTTP庫

 相关参考资料:

文档:Requests: 让 HTTP 服务人类 — Requests 2.18.1 文档

requests · PyPI:requests · PyPI

requests源码:GitH0ub - psf/requests: A simple, yet elegant, HTTP library.

HTTP协议相关:

HTTP协议相关知识-CSDN博客

鉴权Cookies、授权session、token-CSDN博客

安装:

pip install requests

1.1 发送get 请求

  • 方法:requests.get()
  • 参数传递:使用parmas传递参数
#导入 requess
#requests就是一个客户端,客户端是什么? 发送请求的一方,不一定有界面 前端、postman,user-agent
#python用requests发送请求其就是一个user-agent
#接收请求:服务端import  requests#发送GET请求,需要传递参数,URL
url = "http://www.baidu.com"
res = requests.get(url)#得到响应数据
"""
通过res获取其响应数据
"""
print(res) #<Response [200]>
print(res.status_code) #200
#获取返回的数据,获取文本
#方式一:返回HTML页面
print(res.text)

打印如图:  

#方式二:二进制格式
#为字节流数据
#特殊情况:图片、视频、音频
print(res.content)

打印如图: 

#打印为JSON格式的数据,返回的格式为字典
#返回的是字典,如果接口返回的不是json格式,res,json()报错
print(res.json())#如果接口不是json的数据
#只能使用res.text,不然会报错

1.2 发送post 请求

  • 方法:requests.post()
  • 参数传递方式:
    • application/x-www-form-urlencoded类型参数(表单类型):
      • 使用data进行传递
    • application/json类型参数(json类型):
      • 使用json进行传递

post和get即请求语句不相同,响应数据获取是一致的

res = requests.post(url)print(res)
print(res.text)
print(res.content)
print(res.json())

 1.2.1 常规用法


url = 'http://httpbin.org/post'
data = {'key1':'value1', 'key2':'value2'}
r =requests.post(url, data)
print(r)
print(r.text)
print(r.content)"""结果
<Response [200]>
{"args": {}, "data": "", "files": {}, "form": {"key1": "value1", "key2": "value2"}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "23", "Content-Type": "application/x-www-form-urlencoded", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post"
}b'{\n  "args": {}, \n  "data": "", \n  "files": {}, \n  "form": {\n    "key1": "value1", \n    "key2": "value2"\n  }, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "23", \n    "Content-Type": "application/x-www-form-urlencoded", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post"\n}\n'"""

1.2.2 JSON形式

 查看:python模块05-json-CSDN博客

1.3 发送patch请求

  • 方法:requests.patch()
  • 参数传递方式:
    • application/x-www-form-urlencoded类型参数(表单类型):
      • 使用data进行传递
    • application/json类型参数(json类型):
      • 使用json进行传递

请求参数也可以使用字符串,但存在解析慢,存在数据格式不通用的场景,一般是通过字典形式来传递

2 响应数据的获取

  • 方式一:text属性,自动识别编码方式进行编码
    •         data = response.text
  • 方式二:content属性,需要 定要decode方法指定编码方式解码
    •         data = response.content.decode('utf8')
  • 方式三:json方式,返回数据为json格式时,使用该方法来获取
    •          data = response.json()
  • #查看完整的url print(res.url)
  • #查看响应头部的字符编码 print(res.encoding)
  • #查看响应码 print(res.status_code)

3 指定header设置

# 发送post请求
url = "http://httpbin.org/post"
user = {"username": "python","password": "123456"
}#headers不仅放type还可以放其他参数
headers = {"content-type":"application/json"
}# 如何发送query string
# 即使head设置为了json,但params也转换不到body中,params还是在url当中
res = requests.post(url, params=user, headers=headers)#将参数放到body中
res = requests.post(url, data=user, headers=headers)# form表单格式数据
print(res)
print(res.text)
print(res.content)
print(res.json())"""结果
<Response [200]>
{"args": {"password": "123456", "username": "python"}, "data": "", "files": {}, "form": {}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "0", "Content-Type": "application/json", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post?username=python&password=123456"
}b'{\n  "args": {\n    "password": "123456", \n    "username": "python"\n  }, \n  "data": "", \n  "files": {}, \n  "form": {}, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "0", \n    "Content-Type": "application/json", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post?username=python&password=123456"\n}\n'
{'args': {'password': '123456', 'username': 'python'}, 'data': '', 'files': {}, 'form': {}, 'headers': {'Accept': '*/*', 'Accept-Encoding': 'gzip, deflate', 'Content-Length': '0', 'Content-Type': 'application/json', 'Host': 'httpbin.org', 'User-Agent': 'python-requests/2.32.3', 'X-Amzn-Trace-Id': 'Root=1-66cb5487-0a111f6318caef86485e3568'}, 'json': None, 'origin': '172.104.189.197', 'url': 'http://httpbin.org/post?username=python&password=123456'}"""

4 接口有鉴权怎么访问?

案例:请求需要登录才能访问的接口怎么办?

4.1 cookie + session 鉴权的接口处理?

        使用requests.session对象来发送请求

        session对象可以自动传递cookies信息(下一次请求会自动携带上次请求的cookies)

import requests
#创建session对象
sessio = requests.session()

步骤:先发请求登录,然后再请求需要鉴权的接口

import requests
s = requests.Session()r = s.get('http://httpbin.org/cookies', cookies={'from-my':'browser'})
print(r.text)
"""结果
{"cookies": {"from-my": "browser"}
}
"""r = s.get('http://httpbin.org/cookies')
print(r.text)
"""结果
{"cookies": {}
}
"""#如果要手动添加cookie信息,可以属于Cookie Utility来操作
with requests.Session() as s:s.get('http://httpbin.org/cookies/set/sessioncookie/123456789')

httpbin 是一个使用 Python + Flask 编写的 HTTP HTTP Request & Response Service。,是一个开源项目。

主要用于测试 HTTP 库

 httpbin.org

4.2 使用token鉴权的接口处理?

登录之后,提取token,保存起来

请求需要鉴权的接口时,带上登录后提取的token

5 对requests模块进行二次封装

  • 封装目的:
    •  为了使用的时候更方便提高代码的重用率
  • 封装的需求?
    •  逻辑代码进行封装的方法,关键的数据参数化
  • 哪些数据需要参数化?
    • 请求地址、请求方法、请求参数
def simple(url,params=None,data=None,json=None,method='get',**kwargs):"""封装接口:return:字典 res.json()"""url = urlres = requests.request(method,url ,params = params,data=data,json = json,**kwargs)try:return res.json()except Exception as e:logging.error("返回数据不是json格式:{}".format(e))return res.textreturn None

这篇关于python模块04-requests的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1107838

相关文章

Python的Darts库实现时间序列预测

《Python的Darts库实现时间序列预测》Darts一个集统计、机器学习与深度学习模型于一体的Python时间序列预测库,本文主要介绍了Python的Darts库实现时间序列预测,感兴趣的可以了解... 目录目录一、什么是 Darts?二、安装与基本配置安装 Darts导入基础模块三、时间序列数据结构与

Python正则表达式匹配和替换的操作指南

《Python正则表达式匹配和替换的操作指南》正则表达式是处理文本的强大工具,Python通过re模块提供了完整的正则表达式功能,本文将通过代码示例详细介绍Python中的正则匹配和替换操作,需要的朋... 目录基础语法导入re模块基本元字符常用匹配方法1. re.match() - 从字符串开头匹配2.

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践

Python一次性将指定版本所有包上传PyPI镜像解决方案

《Python一次性将指定版本所有包上传PyPI镜像解决方案》本文主要介绍了一个安全、完整、可离线部署的解决方案,用于一次性准备指定Python版本的所有包,然后导出到内网环境,感兴趣的小伙伴可以跟随... 目录为什么需要这个方案完整解决方案1. 项目目录结构2. 创建智能下载脚本3. 创建包清单生成脚本4

Python实现Excel批量样式修改器(附完整代码)

《Python实现Excel批量样式修改器(附完整代码)》这篇文章主要为大家详细介绍了如何使用Python实现一个Excel批量样式修改器,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一... 目录前言功能特性核心功能界面特性系统要求安装说明使用指南基本操作流程高级功能技术实现核心技术栈关键函

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e