python模块04-requests

2024-08-26 06:44
文章标签 python 模块 04 requests

本文主要是介绍python模块04-requests，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

1 requests模块发送请求

Requests是一个Python HTTP庫

 相关参考资料：

文档：Requests: 让 HTTP 服务人类 — Requests 2.18.1 文档

requests · PyPI：requests · PyPI

requests源码：GitH0ub - psf/requests: A simple, yet elegant, HTTP library.

HTTP协议相关：

HTTP协议相关知识-CSDN博客

鉴权Cookies、授权session、token-CSDN博客

安装：

pip install requests

1.1 发送get 请求

  • 方法：requests.get()
  • 参数传递：使用parmas传递参数
#导入 requess
#requests就是一个客户端，客户端是什么？ 发送请求的一方，不一定有界面 前端、postman,user-agent
#python用requests发送请求其就是一个user-agent
#接收请求：服务端import  requests#发送GET请求，需要传递参数，URL
url = "http://www.baidu.com"
res = requests.get(url)#得到响应数据
"""
通过res获取其响应数据
"""
print(res) #<Response [200]>
print(res.status_code) #200
#获取返回的数据，获取文本
#方式一：返回HTML页面
print(res.text)

打印如图：  

#方式二：二进制格式
#为字节流数据
#特殊情况：图片、视频、音频
print(res.content)

打印如图： 

#打印为JSON格式的数据,返回的格式为字典
#返回的是字典，如果接口返回的不是json格式，res,json()报错
print(res.json())#如果接口不是json的数据
#只能使用res.text,不然会报错

1.2 发送post 请求

  • 方法：requests.post()
  • 参数传递方式：
    • application/x-www-form-urlencoded类型参数（表单类型）：
      • 使用data进行传递
    • application/json类型参数（json类型）：
      • 使用json进行传递

post和get即请求语句不相同，响应数据获取是一致的

res = requests.post(url)print(res)
print(res.text)
print(res.content)
print(res.json())

 1.2.1 常规用法


url = 'http://httpbin.org/post'
data = {'key1':'value1', 'key2':'value2'}
r =requests.post(url, data)
print(r)
print(r.text)
print(r.content)"""结果
<Response [200]>
{"args": {}, "data": "", "files": {}, "form": {"key1": "value1", "key2": "value2"}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "23", "Content-Type": "application/x-www-form-urlencoded", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post"
}b'{\n  "args": {}, \n  "data": "", \n  "files": {}, \n  "form": {\n    "key1": "value1", \n    "key2": "value2"\n  }, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "23", \n    "Content-Type": "application/x-www-form-urlencoded", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb4246-735d2da0745db93031d6070b"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post"\n}\n'"""

1.2.2 JSON形式

 查看：python模块05-json-CSDN博客

1.3 发送patch请求

  • 方法：requests.patch()
  • 参数传递方式：
    • application/x-www-form-urlencoded类型参数（表单类型）：
      • 使用data进行传递
    • application/json类型参数（json类型）：
      • 使用json进行传递

请求参数也可以使用字符串,但存在解析慢，存在数据格式不通用的场景，一般是通过字典形式来传递

2 响应数据的获取

  • 方式一：text属性，自动识别编码方式进行编码
    •         data = response.text
  • 方式二：content属性，需要 定要decode方法指定编码方式解码
    •         data = response.content.decode('utf8')
  • 方式三：json方式，返回数据为json格式时，使用该方法来获取
    •          data = response.json()
  • #查看完整的url print(res.url)
  • #查看响应头部的字符编码 print(res.encoding)
  • #查看响应码 print(res.status_code)

3 指定header设置

# 发送post请求
url = "http://httpbin.org/post"
user = {"username": "python","password": "123456"
}#headers不仅放type还可以放其他参数
headers = {"content-type":"application/json"
}# 如何发送query string
# 即使head设置为了json,但params也转换不到body中，params还是在url当中
res = requests.post(url, params=user, headers=headers)#将参数放到body中
res = requests.post(url, data=user, headers=headers)# form表单格式数据
print(res)
print(res.text)
print(res.content)
print(res.json())"""结果
<Response [200]>
{"args": {"password": "123456", "username": "python"}, "data": "", "files": {}, "form": {}, "headers": {"Accept": "*/*", "Accept-Encoding": "gzip, deflate", "Content-Length": "0", "Content-Type": "application/json", "Host": "httpbin.org", "User-Agent": "python-requests/2.32.3", "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"}, "json": null, "origin": "172.104.189.197", "url": "http://httpbin.org/post?username=python&password=123456"
}b'{\n  "args": {\n    "password": "123456", \n    "username": "python"\n  }, \n  "data": "", \n  "files": {}, \n  "form": {}, \n  "headers": {\n    "Accept": "*/*", \n    "Accept-Encoding": "gzip, deflate", \n    "Content-Length": "0", \n    "Content-Type": "application/json", \n    "Host": "httpbin.org", \n    "User-Agent": "python-requests/2.32.3", \n    "X-Amzn-Trace-Id": "Root=1-66cb5487-0a111f6318caef86485e3568"\n  }, \n  "json": null, \n  "origin": "172.104.189.197", \n  "url": "http://httpbin.org/post?username=python&password=123456"\n}\n'
{'args': {'password': '123456', 'username': 'python'}, 'data': '', 'files': {}, 'form': {}, 'headers': {'Accept': '*/*', 'Accept-Encoding': 'gzip, deflate', 'Content-Length': '0', 'Content-Type': 'application/json', 'Host': 'httpbin.org', 'User-Agent': 'python-requests/2.32.3', 'X-Amzn-Trace-Id': 'Root=1-66cb5487-0a111f6318caef86485e3568'}, 'json': None, 'origin': '172.104.189.197', 'url': 'http://httpbin.org/post?username=python&password=123456'}"""

4 接口有鉴权怎么访问？

案例：请求需要登录才能访问的接口怎么办？

4.1 cookie + session 鉴权的接口处理？

        使用requests.session对象来发送请求

        session对象可以自动传递cookies信息（下一次请求会自动携带上次请求的cookies）

import requests
#创建session对象
sessio = requests.session()

步骤：先发请求登录，然后再请求需要鉴权的接口

import requests
s = requests.Session()r = s.get('http://httpbin.org/cookies', cookies={'from-my':'browser'})
print(r.text)
"""结果
{"cookies": {"from-my": "browser"}
}
"""r = s.get('http://httpbin.org/cookies')
print(r.text)
"""结果
{"cookies": {}
}
"""#如果要手动添加cookie信息，可以属于Cookie Utility来操作
with requests.Session() as s:s.get('http://httpbin.org/cookies/set/sessioncookie/123456789')

httpbin 是一个使用 Python + Flask 编写的 HTTP HTTP Request & Response Service。，是一个开源项目。

主要用于测试 HTTP 库

 httpbin.org

4.2 使用token鉴权的接口处理？

登录之后，提取token，保存起来

请求需要鉴权的接口时，带上登录后提取的token

5 对requests模块进行二次封装

  • 封装目的：
    •  为了使用的时候更方便提高代码的重用率
  • 封装的需求？
    •  逻辑代码进行封装的方法，关键的数据参数化
  • 哪些数据需要参数化？
    • 请求地址、请求方法、请求参数
def simple(url,params=None,data=None,json=None,method='get',**kwargs):"""封装接口:return:字典 res.json()"""url = urlres = requests.request(method,url ,params = params,data=data,json = json,**kwargs)try:return res.json()except Exception as e:logging.error("返回数据不是json格式：{}".format(e))return res.textreturn None

这篇关于python模块04-requests的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/1107838。

相关文章

Python实现网格交易策略的过程

Python实现网格交易策略的过程

《Python实现网格交易策略的过程》本文讲解Python网格交易策略,利用ccxt获取加密货币数据及backtrader回测,通过设定网格节点,低买高卖获利,适合震荡行情,下面跟我一起看看我们的第一... 网格交易是一种经典的量化交易策略，其核心思想是在价格上下预设多个“网格”，当价格触发特定网格时执行买
阅读更多...
Python标准库之数据压缩和存档的应用详解

Python标准库之数据压缩和存档的应用详解

《Python标准库之数据压缩和存档的应用详解》在数据处理与存储领域,压缩和存档是提升效率的关键技术,Python标准库提供了一套完整的工具链,下面小编就来和大家简单介绍一下吧... 目录一、核心模块架构与设计哲学二、关键模块深度解析1.tarfile：专业级归档工具2.zipfile：跨平台归档首选3.
阅读更多...
使用Python构建智能BAT文件生成器的完美解决方案

使用Python构建智能BAT文件生成器的完美解决方案

《使用Python构建智能BAT文件生成器的完美解决方案》这篇文章主要为大家详细介绍了如何使用wxPython构建一个智能的BAT文件生成器,它不仅能够为Python脚本生成启动脚本,还提供了完整的文... 目录引言运行效果图项目背景与需求分析核心需求技术选型核心功能实现1. 数据库设计2. 界面布局设计3
阅读更多...
Python进行JSON和Excel文件转换处理指南

Python进行JSON和Excel文件转换处理指南

《Python进行JSON和Excel文件转换处理指南》在数据交换与系统集成中,JSON与Excel是两种极为常见的数据格式,本文将介绍如何使用Python实现将JSON转换为格式化的Excel文件,... 目录将 jsON 导入为格式化 Excel将 Excel 导出为结构化 JSON处理嵌套 JSON：
阅读更多...
Python操作PDF文档的主流库使用指南

Python操作PDF文档的主流库使用指南

《Python操作PDF文档的主流库使用指南》PDF因其跨平台、格式固定的特性成为文档交换的标准,然而,由于其复杂的内部结构,程序化操作PDF一直是个挑战,本文主要为大家整理了Python操作PD... 目录一、 基础操作1.PyPDF2 (及其继任者 pypdf)2.PyMuPDF / fitz3.Fre
阅读更多...
python设置环境变量路径实现过程

python设置环境变量路径实现过程

《python设置环境变量路径实现过程》本文介绍设置Python路径的多种方法：临时设置（Windows用`set`,Linux/macOS用`export`）、永久设置（系统属性或shell配置文件... 目录设置python路径的方法临时设置环境变量（适用于当前会话）永久设置环境变量（Windows系统
阅读更多...
python中列表应用和扩展性实用详解

python中列表应用和扩展性实用详解

《python中列表应用和扩展性实用详解》文章介绍了Python列表的核心特性：有序数据集合,用[]定义,元素类型可不同,支持迭代、循环、切片,可执行增删改查、排序、推导式及嵌套操作,是常用的数据处理... 目录1、列表定义2、格式3、列表是可迭代对象4、列表的常见操作总结1、列表定义是处理一组有序项目的
阅读更多...
python运用requests模拟浏览器发送请求过程

python运用requests模拟浏览器发送请求过程

《python运用requests模拟浏览器发送请求过程》模拟浏览器请求可选用requests处理静态内容,selenium应对动态页面,playwright支持高级自动化,设置代理和超时参数,根据需... 目录使用requests库模拟浏览器请求使用selenium自动化浏览器操作使用playwright
阅读更多...
python使用try函数详解

python使用try函数详解

《python使用try函数详解》Pythontry语句用于异常处理,支持捕获特定/多种异常、else/final子句确保资源释放,结合with语句自动清理,可自定义异常及嵌套结构,灵活应对错误场景... 目录try 函数的基本语法捕获特定异常捕获多个异常使用 else 子句使用 finally 子句捕获所
阅读更多...
Python极速搭建局域网文件共享服务器完整指南

Python极速搭建局域网文件共享服务器完整指南

《Python极速搭建局域网文件共享服务器完整指南》在办公室或家庭局域网中快速共享文件时,许多人会选择第三方工具或云存储服务,但这些方案往往存在隐私泄露风险或需要复杂配置,下面我们就来看看如何使用Py... 目录一、android基础版：HTTP文件共享的魔法命令1. 一行代码启动HTTP服务器2. 关键参
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2