Python 网络请求:深入理解Requests库

news2025/1/19 7:56:46

目录

引言

一、Requests库简介

二、安装与基本使用

三、requests库的特性与优势

四、requests库在实际应用中的案例

1.get请求

2.post请求

3.超时重试

4.headers设置

5.session会话

6.携带cookie​​​​​​​

7.携带代理​​​​​​​

8.携带身份认证​​​​​​​

9.文件上传​​​​​​​

10.文件下载​​​​​​​

11.解决重定向​​​​​​​

12.证书验证​​​​​​​

总结


引言

在Python编程世界中,进行网络数据交互是一项至关重要的技能,而Requests库则是这一领域中最受开发者喜爱的工具之一。Requests库以其简洁易用、功能强大而著称,让HTTP客户端操作变得无比轻松,无论是获取网页内容、发送POST请求还是处理API响应,它都能提供强大的支持。本文将带领您深入了解Python Requests库,探讨其核心功能和应用场景。

一、Requests库简介

Requests库由Kenneth Reitz于2012年创建,旨在简化HTTP客户端的使用。它建立在urllib3之上,但提供了更加人性化的接口和丰富的功能特性。只需一行代码,就能发起HTTP GET、POST等各类请求,并能自动处理各种HTTP认证机制、重定向、cookies以及超时等问题。

二、安装与基本使用

在Python环境中,通过pip命令即可快速安装Requests库:

pip install requests

导入库后,发起一个HTTP GET请求只需要短短几行代码:

import requests

response = requests.get('https://www.example.com')
print(response.status_code)
print(response.text)

上述代码首先导入requests模块,然后使用get方法向指定URL发送GET请求,并将服务器返回的响应存储在response对象中。response对象包含了诸如状态码、响应体文本、headers等多种信息。

三、requests库的特性与优势

  1. 简洁易用:requests库的API设计非常简洁,易于上手。开发者只需关注业务逻辑,无需处理底层的HTTP细节。
  2. 功能强大:requests库支持多种HTTP方法、自动处理URL编码、会话、cookies等复杂操作,能够满足各种HTTP请求的需求。
  3. 高度可定制:requests库提供了丰富的参数和选项,允许开发者根据实际需求定制请求和响应的处理方式。
  4. 社区支持:requests库拥有庞大的用户群体和活跃的社区,遇到问题时可以轻松找到解决方案和支持。

四、requests库在实际应用中的案例

  1. 网页爬虫:使用requests库发送GET请求,抓取网页内容,并结合BeautifulSoup等库解析HTML,提取所需信息。
  2. API交互:与第三方API进行交互,发送POST、PUT等请求,获取或修改数据。
  3. 数据上报:将本地数据通过requests库发送到远程服务器进行存储或分析。

案例代码:

1.get请求

import requests
response = requests.get('https://www.example.com')
print(response.text)​​​​​​​
 
print(response.status_code)  # 输出状态码  
print(response.headers)  # 输出响应头  
print(response.text)  # 输出响应内容(文本格式)  
print(response.json())  # 输出响应内容(JSON格式,如果响应内容是JSON的话)

2.post请求

import requestsimport jsondata = {'key': 'value'}json_data = json.dumps(data)response = requests.post('https://www.example.com', json=json_data)print(response.text)

3.超时重试

response = requests.get('https://api.example.com/data', timeout=5)

try:
    response = requests.get('https://api.example.com/data', timeout=5)
except requests.exceptions.Timeout:
    print('Timeout! Let\'s try it again...')
    response = requests.get('https://api.example.com/data', timeout=5)

4.headers设置

import requestsheaders = {'User-Agent': 'Mozilla/5.0'}response = requests.get('https://www.example.com', headers=headers)print(response.text)

5.session会话​​​​​​​

import requestssession = requests.Session()# 第一个请求response1 = session.get('https://www.example.com/login')print(response1.text)# 第二个请求,会话保持response2 = session.get('https://www.example.com/dashboard')print(response2.text)

6.携带cookie​​​​​​​

import requestscookies = {'key': 'value'}response = requests.get('https://www.example.com', cookies=cookies)print(response.text)

7.携带代理​​​​​​​

import requestsproxies = {  'http': 'http://10.10.1.10:3128',   'https': 'http://10.10.1.10:1080'  }response = requests.get('https://www.example.com', proxies=proxies)print(response.text)

8.携带身份认证​​​​​​​

import requestsfrom requests.auth import HTTPBasicAuthresponse = requests.get('https://www.example.com', auth=HTTPBasicAuth('username', 'password'))
print(response.text)

9.文件上传​​​​​​​

import requestsfiles = {'file': open('example.txt', 'rb')}response = requests.post('https://www.example.com/upload', files=files)print(response.text)

10.文件下载​​​​​​​

import requestsurl = 'https://www.example.com/file.jpg'response = requests.get(url)with open('file.jpg', 'wb') as f:    f.write(response.content)

11.解决重定向​​​​​​​

import requestsresponse = requests.get('https://www.example.com', allow_redirects=False)if response.status_code == 302:    redirect_url = response.headers['Location']    print(f'Redirected to: {redirect_url}')

12.证书验证​​​​​​​

import requestsresponse = requests.get('https://www.example.com', verify=False)print(response.text)

总结

requests库作为Python中处理HTTP请求的神器,以其简洁易用、功能强大、高度可定制和社区支持等特性,在实际应用中发挥着重要作用。无论是网页爬虫、API交互还是数据上报等场景,requests库都能帮助开发者更加高效地处理HTTP请求,提升开发效率。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1568922.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

FLink学习(三)-DataStream

一、DataStream 1&#xff0c;支持序列化的类型有 基本类型&#xff0c;即 String、Long、Integer、Boolean、Array复合类型&#xff1a;Tuples、POJOs 和 Scala case classes Tuples Flink 自带有 Tuple0 到 Tuple25 类型 Tuple2<String, Integer> person Tuple2.…

InternLM2-lesson2作业

书生浦语大模型趣味 Demo 视频连接&#xff1a;https://www.bilibili.com/video/BV1AH4y1H78d/?vd_source902e3124d4683c41b103f1d1322401fa 目录 书生浦语大模型趣味 Demo一、基础作业二、进阶作业 一、基础作业 第一次执行&#xff1a; 第二次执行&#xff1a; 第一次执…

最新408试卷分析+备考经验分享

408出题再糟糕&#xff0c;你是不是还是要考&#xff1f; 别管出题人出多刁钻的题&#xff0c;大家拿到的卷子都是一样的&#xff0c;要难就都难&#xff0c;要刁钻就一起g... 所以再潜心钻研出题规律或出题套路&#xff0c;不如多花些时间去多复习巩固几遍知识点&#xff01…

Leetcode_2两数相加

文章目录 前言一、两数相加1.1 问题描述1.2 解法一&#xff1a;分别将链表转为数字&#xff0c;然后相加1.3 代码实现1.4 解法二&#xff1a;分别将对应位置数字相加1.5 代码实现 二、使用步骤1.引入库2.读入数据 前言 链表是一种物理内存非连续存储&#xff0c;非顺序的线性数…

深入理解C/C++的内存管理

在C和C中&#xff0c;高效的内存管理是编写性能优化和资源高效利用程序的关键。本文将深入探讨C/C内存管理的各个方面&#xff0c;包括内存的分布、C语言和C中的动态内存管理方式&#xff0c;以及new和delete操作符的使用 C/C内存分布 C和C程序的内存可以分为以下几个区域&…

【Linux】-进程知识铺垫①计算机硬件的组织:冯诺依曼体系结构详细解读②关于操作系统对软硬件及用户的意义

目录 ​编辑 1.关于计算机的体系结构 1.1 冯诺依曼体系结构的诞生 2.冯诺依曼体系结构 2.1 cpu:运算器&#xff1a;更多的是让cpu具有特殊的数据计算功能&#xff1a; 2.2 控制器 2.3输入设备 2.4输出设备 3.计算机各个硬件设备之间的关系 4.内存与计算机效率 5.关于为什么总说…

AI智能校色解决方案,专业级画质提升

由于拍摄环境、设备性能以及编辑经验等多种因素的影响&#xff0c;视频画质往往难以达到理想状态。这时&#xff0c;一款高效、智能的校色解决方案就显得尤为重要。美摄科技凭借深厚的图像处理技术和AI算法研发实力&#xff0c;推出了全新的AI智能校色解决方案&#xff0c;助力…

Kubernetes(k8s)核心资源解析:Pod详解

Kubernetes核心资源解析&#xff1a;Pod详解 1、什么是Pod&#xff1f;2、Pod 的组成3、Pod 如何管理多个容器4、Pod 的网络5、Pod 的存储方式6、Pod 的工作方式6.1 自主式 Pod6.2 监控和管理 Pod6.3 Pod 的创建流程 &#x1f496;The Begin&#x1f496;点点关注&#xff0c;收…

力扣热题100_链表_2_两数相加

文章目录 题目链接解题思路解题代码 题目链接 2. 两数相加 给你两个 非空 的链表&#xff0c;表示两个非负的整数。它们每位数字都是按照 逆序 的方式存储的&#xff0c;并且每个节点只能存储 一位 数字。 请你将两个数相加&#xff0c;并以相同形式返回一个表示和的链表。 …

网络安全 | 什么是云安全?

关注WX&#xff1a;CodingTechWork 云安全-介绍 云安全是为了解决企业安全所面临的外部和内部威胁&#xff0c;它是一组程序和技术的集合。企业在实施其数字化转型策略&#xff0c;并将各种云端工具和服务纳入企业基础架构中时&#xff0c;需要云安全保障业务顺利进行。 云计…

ComfyUI ClipSeg插件报错- resize_image出错应该怎么办

上一篇刚介绍了这个插件&#xff0c;结果emm..很快发现事情并不简单...结果又报错了。 后台报错信息&#xff1a; Unused or unrecognized kwargs: padding. !!! Exception during processing !!! Traceback (most recent call last): File "F:\ComfyUI-aki\execution.p…

蓝桥杯练习笔记(十七)

蓝桥杯练习笔记&#xff08;十七&#xff09; 一、 输入样例 7 7 1000001 0100010 0010100 0001AAA 00010A0 00010A0 00010A0蓝桥官网题解&#xff1a; 该题解是用了三个循环分别对三个方向的相同字符的长度进行统计&#xff0c;找出最大长度&#xff0c;最后对找出的最长Y进…

Finite Element Procedures K.J.Bathe 【教材pdf+部分源码】|有限元经典教材 | 有限元编程

专栏导读 作者简介&#xff1a;工学博士&#xff0c;高级工程师&#xff0c;专注于工业软件算法研究本文已收录于专栏&#xff1a;《有限元编程从入门到精通》本专栏旨在提供 1.以案例的形式讲解各类有限元问题的程序实现&#xff0c;并提供所有案例完整源码&#xff1b;2.单元…

uni-app 实现仿微信界面【我的+首页聊天列表+长按菜单功能+添加菜单功能】+ 附源码

目录 【微信首页聊天列表】界面 【我的】界面 源代码&#xff1a; 文后附完整代码&#xff0c;支持一键导入 HBuilderX 示例体验 【微信首页聊天列表】界面 仿造【微信首页聊天列表 长按菜单功能 右上角添加按钮弹窗功能】&#xff0c;使用 uni-app 开发&#xff0c; 一…

ARM IHI0069F GIC architecture specification (5)

Ch2 中断分配与路由 2.1 The Distributor and Redistributors Distributor 为 SPI 提供路由配置&#xff0c;并保存所有关联的路由和优先级信息。 Redistributor 提供 PPI 和 SGI 的配置设置。 Redistributor总是在有限的时间内向 CPU 接口呈现具有最高优先级的待处理中断。 …

算法 day29 回溯5

491 非递减子序列 给你一个整数数组 nums &#xff0c;找出并返回所有该数组中不同的递增子序列&#xff0c;递增子序列中 至少有两个元素 。你可以按 任意顺序 返回答案。 数组中可能含有重复元素&#xff0c;如出现两个整数相等&#xff0c;也可以视作递增序列的一种特殊情…

蓝桥杯(4):python动态规划DF[1]

动态规划相当于正着想&#xff1f;dfs主要适用于位置的变化&#xff1f; 子问题&#xff01;状态&#xff0c;状态转移方程 1 一维DP 1.1 定义 重叠子问题&#xff01;转换成子问题 &#xff0c;与记忆化搜索很像 1.2 例子 1.2.1 上楼梯 子问题到最终的问题只能跨一步&…

arm裸机-1、定时器pwm

时钟配置 我们使用s3c2440&#xff0c;主频12M&#xff0c;查看用户手册 通过锁相环抬升到400MHZ&#xff0c;分成三条通路&#xff0c;通过HHDIVN和PDIVN配置频率比&#xff0c;这个频率比配置手册已经给出。 配置MPLL主频400Mhz&#xff0c; 通过这个公式算出MPLL s、p、m都…

LeetCode 1379.找出克隆二叉树中的相同节点:二叉树遍历

【LetMeFly】1379.找出克隆二叉树中的相同节点&#xff1a;二叉树遍历 力扣题目链接&#xff1a;https://leetcode.cn/problems/find-a-corresponding-node-of-a-binary-tree-in-a-clone-of-that-tree/ 给你两棵二叉树&#xff0c;原始树 original 和克隆树 cloned&#xff0…

《QT实用小工具·五》串口助手

1、概述 源码放在文章末尾 该项目实现了串口助手的功能&#xff0c;可在界面上通过串口配置和网络配置进行串口调试。 基本功能 支持16进制数据发送与接收。支持windows下COM9以上的串口通信。实时显示收发数据字节大小以及串口状态。支持任意qt版本&#xff0c;亲测4.7.0 到…