requests:一个强大的HTTP请求Python库

2024-08-31 20:20

本文主要是介绍requests:一个强大的HTTP请求Python库,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

我是东哥,一个热衷于用Python简化日常工作的技术爱好者。今天,我要和大家分享一个网络请求的Python利器——requests库。你是否曾经在编写代码时,需要从网络上获取数据,却对复杂的HTTP协议感到头疼?requests库将帮你轻松解决这个问题。

一、初识requests库

requests库是Python中一个用于发送HTTP请求的第三方库。它基于urllib库进行了封装,提供了更加简洁、易用的API。无论是GET请求、POST请求,还是其他类型的HTTP请求,requests库都能轻松应对。同时,它还支持SSL证书验证、会话管理、代理设置等功能,让你的网络请求更加安全、高效。

项目地址:https://github.com/psf/requests

二、安装requests库

在开始使用requests之前,你需要先安装它。打开你的命令行工具,输入以下命令:

pip install requests

安装完成后,你就可以在Python脚本中导入requests并开始使用了。

三、基本用法:轻松发送HTTP请求

让我们通过几个简单的例子来看看requests的基本用法。

1. 发送GET请求

import requests
# 发送GET请求到百度首页
response = requests.get('https://www.baidu.com')
# 打印响应内容的前500个字符
print(response.text[:500])

在这段代码中,我们向百度首页发送了一个GET请求,并打印出了响应内容的前500个字符,输出内容如下:

<!DOCTYPE html>
<!--STATUS OK--><html> <head><meta http-equiv=content-type content=text/html;charset=utf-8><meta http-equiv=X-UA-Compatible content=IE=Edge><meta content=always name=referrer><link rel=stylesheet type=text/css href=https://ss1.bdstatic.com/5eN1bjq8AAUYm2zgoY3K/r/www/cache/bdorz/baidu.min.css><title>ç™¾åº¦ä¸€ä¸‹ï¼Œä½ å°±çŸ¥é“</title></head> <body link=#0000cc> <div id=wrapper> <div id=head> <div class=head_wrapper> <div class=s_form> <div class=s_form_wrapper> <div id=lg> <img h

可以看到,此时显示有乱码。

2. 发送POST请求

import requests
# 发送POST请求到Postman的Echo服务
response = requests.post('https://postman-echo.com/post', data={'key': 'value'})
# 打印响应状态码
print(response.status_code)

这里,我们向Postman的Echo服务发送了一个POST请求,并传递了一些数据。然后,我们打印出了响应的状态码,输出内容如下:

{"args": {},"data": "","files": {},"form": {"name": "东哥说AI"},"headers": {"host": "postman-echo.com","x-forwarded-proto": "http","x-request-start": "t=1724975958.023","connection": "close","content-length": "34","x-forwarded-port": "443","x-amzn-trace-id": "Root=1-66d10b56-6b2cb9dd41259dec60d1044e","user-agent": "python-requests/2.32.3","accept-encoding": "gzip, deflate","accept": "*/*","content-type": "application/x-www-form-urlencoded"},"json": {"name": "东哥说AI"},"url": "http://postman-echo.com/post"
}

四、高级用法:玩转requests库

接下来,让我们看看requests的一些高级用法。

1. 传递Headers

有时候,我们需要模拟浏览器发送请求,这时候就需要传递Headers。

import requests
# 定义Headers
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'
}
# 发送带Headers的GET请求到百度首页
response = requests.get('https://www.baidu.com', headers=headers)
print(response.text[:500])

在这个例子中,我们通过传递User-Agent来模拟浏览器请求百度首页,并打印出响应内容的前500个字符,输出内容如下:

<!DOCTYPE html><!--STATUS OK--><html><head><meta http-equiv="Content-Type" content="text/html;charset=utf-8"><meta http-equiv="X-UA-Compatible" content="IE=edge,chrome=1"><meta content="always" name="referrer"><meta name="theme-color" content="#ffffff"><meta name="description" content="全球领先的中文搜索引擎、致力于让网民更便捷地获取信息,找到所求。百度超过千亿的中文网页数据库,可以瞬间找到相关的搜索结果。"><link rel="shortcut icon" href="https://www.baidu.com/favicon.ico" type="image/x-icon" /><link rel="search" type="application/opensearchdescription+xm

此时显示的内容正常。

2. 处理Cookies

有时候我们需要处理Cookies来维持会话。

import requests
# 首先发送一个请求到Stack Overflow,获取Cookies
response = requests.get('https://stackoverflow.com')
# 使用Session对象来维持会话
session = requests.Session()
session.cookies = response.cookies
# 使用Session对象发送请求,Cookies会被自动处理
response = session.get('https://stackoverflow.com/questions')
print(response.text[:500])

这里我们使用了Session对象来维持会话,并自动处理Cookies,然后我们尝试获取Stack Overflow的问答页面,输出内容如下:

<!DOCTYPE html><html class="html__responsive " lang="en"><head><title>Newest Questions - Stack Overflow</title><link rel="shortcut icon" href="https://cdn.sstatic.net/Sites/stackoverflow/Img/favicon.ico?v=ec617d715196"><link rel="apple-touch-icon" href="https://cdn.sstatic.net/Sites/stackoverflow/Img/apple-touch-icon.png?v=c78bd457575a"><link rel="image_src" href="https://cdn.sstatic.net/Sites/stackoverflow/Img/apple-touch-icon.png?v=c78bd457575

五、小结

requests库是一个强大的网络请求工具,它简化了HTTP请求的处理过程,使得网络编程变得更加简单和直观,非常适合Python领域的小白用户。无论你是想要进行网络爬虫API接口调用,还是其他需要发送HTTP请求的场景,requests库都能为你提供有力的支持。

希望这篇文章能让你对requests库有一个基本的了解,并激发你探索更多可能。如果你有任何问题或想要深入探讨requests库的其他用法,请随时留言。

公众号东哥说AI后台回复003获取文中完整代码~

这篇关于requests:一个强大的HTTP请求Python库的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1124899

相关文章

Python版本信息获取方法详解与实战

《Python版本信息获取方法详解与实战》在Python开发中,获取Python版本号是调试、兼容性检查和版本控制的重要基础操作,本文详细介绍了如何使用sys和platform模块获取Python的主... 目录1. python版本号获取基础2. 使用sys模块获取版本信息2.1 sys模块概述2.1.1

一文详解Python如何开发游戏

《一文详解Python如何开发游戏》Python是一种非常流行的编程语言,也可以用来开发游戏模组,:本文主要介绍Python如何开发游戏的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、python简介二、Python 开发 2D 游戏的优劣势优势缺点三、Python 开发 3D

Python函数作用域与闭包举例深度解析

《Python函数作用域与闭包举例深度解析》Python函数的作用域规则和闭包是编程中的关键概念,它们决定了变量的访问和生命周期,:本文主要介绍Python函数作用域与闭包的相关资料,文中通过代码... 目录1. 基础作用域访问示例1:访问全局变量示例2:访问外层函数变量2. 闭包基础示例3:简单闭包示例4

Python实现字典转字符串的五种方法

《Python实现字典转字符串的五种方法》本文介绍了在Python中如何将字典数据结构转换为字符串格式的多种方法,首先可以通过内置的str()函数进行简单转换;其次利用ison.dumps()函数能够... 目录1、使用json模块的dumps方法:2、使用str方法:3、使用循环和字符串拼接:4、使用字符

Python版本与package版本兼容性检查方法总结

《Python版本与package版本兼容性检查方法总结》:本文主要介绍Python版本与package版本兼容性检查方法的相关资料,文中提供四种检查方法,分别是pip查询、conda管理、PyP... 目录引言为什么会出现兼容性问题方法一:用 pip 官方命令查询可用版本方法二:conda 管理包环境方法

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

pycharm跑python项目易出错的问题总结

《pycharm跑python项目易出错的问题总结》:本文主要介绍pycharm跑python项目易出错问题的相关资料,当你在PyCharm中运行Python程序时遇到报错,可以按照以下步骤进行排... 1. 一定不要在pycharm终端里面创建环境安装别人的项目子模块等,有可能出现的问题就是你不报错都安装

Python打包成exe常用的四种方法小结

《Python打包成exe常用的四种方法小结》本文主要介绍了Python打包成exe常用的四种方法,包括PyInstaller、cx_Freeze、Py2exe、Nuitka,文中通过示例代码介绍的非... 目录一.PyInstaller11.安装:2. PyInstaller常用参数下面是pyinstal

Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题

《Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题》在爬虫工程里,“HTTPS”是绕不开的话题,HTTPS为传输加密提供保护,同时也给爬虫带来证书校验、... 目录一、核心问题与优先级检查(先问三件事)二、基础示例:requests 与证书处理三、高并发选型:

Python中isinstance()函数原理解释及详细用法示例

《Python中isinstance()函数原理解释及详细用法示例》isinstance()是Python内置的一个非常有用的函数,用于检查一个对象是否属于指定的类型或类型元组中的某一个类型,它是Py... 目录python中isinstance()函数原理解释及详细用法指南一、isinstance()函数