百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

干货分享丨Python的HTTP库及示例

liuian 2025-02-11 12:40 11 浏览

HTTP(Hyper Text Transfer Protocol)是一个客户端和服务器端请求和应答的标准。客户端是终端用户,服务器端是网站。客户端发起一个到服务器上指定端口的HTTP请求,服务器向客户端发回一个状态行和响应的消息。

可以使用下面的模块创建Internet Server:

(1)socketserver:以socket为基础,创建一般性的IP Server。

(2)http:通过http模块中的子模块server和client提供各种网络服务。

13.3.1 socketserver模块

socketserver模块提供了一个架构来简化网络(包括服务器)的编写工作,用户不需要使用低级的socket模块。

socketserver模块包含的基本类如下:

(1)TCPServer((hostname, port), handler):支持TCP的服务器。其中,hostname是主机名称,通常是空白字符串;port是通信端口号码;handler是BaseRequestHandler类的实例变量。

(2)UDPServer((hostname, port), handler):支持UDP的服务器。其中,hostname是主机名称,通常是空白字符串;port是通信端口号码;handler是BaseRequestHandler类的实例变量。

(3)UnixStreamServer((hostname, port), handler):使用UNIX网域socket支持串流导向协议(stream-oriented protocol)的服务器。其中,hostname是主机名称,通常是空白字符串;port是通信端口号码;handler是BaseRequestHandler类的实例变量。

(4)UnixDatagramServer((hostname, port), handler):使用UNIX网域socket支持数据通信协议(datagram-oriented protocol)的服务器。其中,hostname是主机名称,通常是空白字符串;port是通信端口号码;handler是BaseRequestHandler类的实例变量。

下面是socketserver模块中类的类变量:

(1)request_queue_size:存储要求队列的大小,该队列用于传给socket的listen()方法。

(2)socket_type:返回服务器使用的socket类型,可以是socket.SOCK_STREAM或socket.SOCK_DGRAM。

下面是socketserver模块中类的属性与方法:

(1)address_family:可以是socket.AF_INET或socket.AF_UNIX。服务器的通信协议群组。

(2)fileno():返回服务器socket的整数文件描述元(integer file descriptor)。

(3)handle_request():创建一个处理函数类的实例变量,以及调用handle()方法处理单一请求。

(4)RequestHandlerClass:存储用户提供的请求处理函数类。

(5)server_address:返回服务器监听用的IP地址与通信端口号码。

(6)serve_forever():操作一个循环来处理无限的请求。

下面的示例演示StreamRequestHandler类的使用。

import socketserver
port = 50007
class myRequestHandler(socketserver.StreamRequestHandler):
def handle(self):
print ("Connection by ", self.client_address)
self.wfile.write("data")
s = socketserver.TCPServer(("", port), myRequestHandler)
s.serve_forever()

13.3.2 server模块

http模块的子模块server提供了各种HTTP服务,主要包括BaseHTTPServer类、CGIHTTPServer类及SimpleHTTPServer类。

server模块以socketserver模块为基础,并且很少直接使用。server模块定义了两个基类来操作基本的HTTP服务器(网站服务器)。

server模块的第一个基类是HTTPServer类,其语法如下:

class HTTPServer((hostname, port), RequestHandlerClass)

HTTPServer类由socketserver.TCPServer类派生。此类先创建一个HTTPServer对象并监听(hostname, port),然后使用RequestHandlerClass来处理要求。

server模块的第二个基类是BaseHTTPRequestHandler类,其语法如下:

class BaseHTTPRequestHandler(request, client_address, server)

用户必须创建一个BaseHTTPRequestHandler类的子类来处理HTTP请求。如果要处理GET请求,就必须重新定义do_GET()方法;如果要处理POST请求,就必须重新定义do_POST()方法。

下面是BaseHTTPRequestHandler类的类变量:

(1)
BaseHTTPRequestHandler.server_version。

(2)
BaseHTTPRequestHandler.sys_version。

(3)
BaseHTTPRequestHandler.protocol_version。

(4)
BaseHTTPRequestHandler.error_message_format。

每一个BaseHTTPRequestHandler类的实例变量都有以下属性:

(1)client_address:返回一个2-tuple(hostname, port),为客户端的地址。

(2)command:识别请求的种类,可以是GET、POST等。

(3)headers:返回一个HTTP表头。

(4)path:返回请求的路径。

(5)request_version:返回请求的HTTP版本字符串。

(6)rfile:包含输入流。

(7)wfile:包含输出流。

每一个BaseHTTPRequestHandler类的实例变量都有以下方法:

(1)handle():请求分派器。此方法会调用以“do_”开头的方法,如do_GET()、do_POST()等。

(2)send_error(error_code [, error_message]):将错误信号传输给客户端。

(3)send_response(response_code [, response_message]):传输响应表头。

(4)send_header(keyword, value):写入一个MIME表头到输出流,此表头包含表头的键值及其值。

(5)end_header():用来识别MIME表头的结尾。

下面的示例演示BaseHTTPRequestHandler类的使用方法。

import http.server 
htmlpage = """
Web Page
Hello Python"""
class myHandler(http.server.BaseHTTPRequestHandler):
 def do_GET(self):
 if self.path == "/":
 self.send_response(200)
 self.send_header("Content-type", "text/html")
 self.end_headers()
 self.wfile.write(htmlpage)
 else:
 self.send_error(404, "File not found")
 
myServer = http.server.HTTPServer(("", 80), myHandler)
myServer.serve_forever()

SimpleHTTPServer类可以处理HTTP server的请求,也可以处理所在目录的文件,即HTML文件。SimpleHTTPRequestHeader类的语法格式如下:

class SimpleHTTPRequestHandler(request, (hostname, port), server)

SimpleHTTPRequestHeader类有以下两个属性:

(1)
SimpleHTTPRequestHeader.server_version。定义服务器模块的级别

(2)
SimpleHTTPRequestHeader.extensions_map:一个字典集,用于映射文件扩展名与MIME类型。

下面的示例演示SimpleHTTPRequestHandler类的使用方法。

import http.server
myHandler = http.server.SimpleHTTPRequestHandler
myServer = http.server.HTTPServer(("", 80), myHandler)
myServer.serve_forever()

CGIHTTPRequestHeader类除了可以处理所在目录的HTML文件外,还可以运行客户端执行CGI(Common Gateway Interface)脚本。CGIHTTPRequestHeader类的语法格式如下:

class CGIHTTPRequestHandler(request, (hostname, port), server)

CGIHTTPRequestHeader类的属性cgi_directories包含一个可以存储CGI脚本的文件夹列表。

下面的示例演示CGIHTTPRequestHandler类的使用方法。

import cgihttpserver
import BaseHTTPServer
class myHandler(http.server.CGIHTTPRequestHandler):
 cgi_directories = ["/cgi-bin"]
myServer = http.server.HTTPServer(("", 80), myHandler)
myServer.serve_forever()

13.3.3 client模块

client模块主要处理客户端的请求。client模块的HTTPConnection类创建并返回一个connection对象。HTTPConnection类的语法格式如下:

class HTTPConnection ([hostname [, port]])

如果参数port没有设置,默认值是80。如果所有的参数都没有设置,就必须使用connect()方法自行连接。以下3个HTTPConnection类的实例变量都会连接到相同的服务器:

import http.client
h1 = http.client.HTTPConnection ("www.cwi.nl")
h2 = http.client.HTTPConnection ("www.cwi.nl:80")
h3 = http.client.HTTPConnection ("www.cwi.nl", 80)

HTTPConnection类的实例变量的方法如下:

(1)endheaders():写入一行空白给服务器,表示这是客户端请求表头的结尾。

(2)connect([hostname [, port]]):创建一个连接。

(3)getresponse():返回服务器的状态。

(4)request():向服务器发送请求。

(5)putheader(header, argument1 [, ...]):写入客户端请求表头的表头行。每一行包括header、一个冒号(:)、一个空白及argument。

(6)putrequest(request, selector):写入客户端请求表头的第一行。参数 request可以是 GET、POST、PUT或HEAD,参数selector是要打开的文件名称。

(7)send(data):调用endheaders()方法后,传输数据给服务器。

下面的示例返回
http://www.python.org/News.html文件,并将此文件保存为一个新文件。

【例13.3】使用HTTPConnection类(源代码\ch13\13.3.py)。

import http.client
#指定主机名称
url = "www.python.org"
#指定打开的文件名称
urlfile = "/News.html"
#连接到主机
host = http.client.HTTPConnection (url)
#写入客户端要求表头的第一行
host.request("GET", urlfile)
#获取服务器的响应
r1=host.getresponse()
#打印服务器返回的状态
print(r1.status,r1.reason)
#将file对象的内容存入新文件
file = open("13.1.html", "w")
#读取网页内容,以utf-8方式保存
str = r1.read().decode("utf-8")
#寻找文本
print(str.find("mlive")) 
#写到文件并将'xa0'替换为空字符
file.write(str.replace('\xa0','')) 
#关闭文件
file.close()

保存并运行程序,即可将
http://www.python.org/News.html文件的内容保存在13.1.html文件中。


本文节选自《Python编程从零开始学(视频教学版)》,本次内容发布,获得作者和出版社授权。

相关推荐

深入解析 MySQL 8.0 JSON 相关函数:解锁数据存储的无限可能

引言在现代应用程序中,数据的存储和处理变得愈发复杂多样。MySQL8.0引入了丰富的JSON相关函数,为我们提供了更灵活的数据存储和检索方式。本文将深入探讨MySQL8.0中的JSON...

MySQL的Json类型个人用法详解(mysql json类型对应java什么类型)

前言虽然MySQL很早就添加了Json类型,但是在业务开发过程中还是很少设计带这种类型的表。少不代表没有,当真正要对Json类型进行特定查询,修改,插入和优化等操作时,却感觉一下子想不起那些函数怎么使...

MySQL的json查询之json_array(mysql json_search)

json_array顾名思义就是创建一个数组,实际的用法,我目前没有想到很好的使用场景。使用官方的例子说明一下吧。例一selectjson_array(1,2,3,4);json_array虽然单独...

头条创作挑战赛#一、LSTM 原理 长短期记忆网络

#头条创作挑战赛#一、LSTM原理长短期记忆网络(LongShort-TermMemory,LSTM)是一种特殊类型的循环神经网络(RNN),旨在解决传统RNN在处理长序列数据时面临的梯度...

TensorBoard最全使用教程:看这篇就够了

机器学习通常涉及在训练期间可视化和度量模型的性能。有许多工具可用于此任务。在本文中,我们将重点介绍TensorFlow的开源工具套件,称为TensorBoard,虽然他是TensorFlow...

图神经网络版本的Kolmogorov Arnold(KAN)代码实现和效果对比

本文约4600字,建议阅读10分钟本文介绍了图神经网络版本的对比。KolmogorovArnoldNetworks(KAN)最近作为MLP的替代而流行起来,KANs使用Kolmogorov-Ar...

kornia,一个实用的 Python 库!(python kkb_tools)

大家好,今天为大家分享一个实用的Python库-kornia。Github地址:https://github.com/kornia/kornia/Kornia是一个基于PyTorch的开源计算...

图像分割掩码标注转YOLO多边形标注

Ultralytics团队付出了巨大的努力,使创建自定义YOLO模型变得非常容易。但是,处理大型数据集仍然很痛苦。训练yolo分割模型需要数据集具有其特定格式,这可能与你从大型数据集中获得的...

[python] 向量检索库Faiss使用指北

Faiss是一个由facebook开发以用于高效相似性搜索和密集向量聚类的库。它能够在任意大小的向量集中进行搜索。它还包含用于评估和参数调整的支持代码。Faiss是用C++编写的,带有Python的完...

如何把未量化的 70B 大模型加载到笔记本电脑上运行?

并行运行70B大模型我们已经看到,量化已经成为在低端GPU(比如Colab、Kaggle等)上加载大型语言模型(LLMs)的最常见方法了,但这会降低准确性并增加幻觉现象。那如果你和你的朋友们...

ncnn+PPYOLOv2首次结合!全网最详细代码解读来了

编辑:好困LRS【新智元导读】今天给大家安利一个宝藏仓库miemiedetection,该仓库集合了PPYOLO、PPYOLOv2、PPYOLOE三个算法pytorch实现三合一,其中的PPYOL...

人工智能——图像识别(人工智能图像识别流程)

概述图像识别(ImageRecognition)是计算机视觉的核心任务之一,旨在通过算法让计算机理解图像内容,包括分类(识别物体类别)、检测(定位并识别多个物体)、分割(像素级识别)等,常见的应用场...

PyTorch 深度学习实战(15):Twin Delayed DDPG (TD3) 算法

在上一篇文章中,我们介绍了DeepDeterministicPolicyGradient(DDPG)算法,并使用它解决了Pendulum问题。本文将深入探讨TwinDelayed...

大模型中常用的注意力机制GQA详解以及Pytorch代码实现

分组查询注意力(GroupedQueryAttention)是一种在大型语言模型中的多查询注意力(MQA)和多头注意力(MHA)之间进行插值的方法,它的目标是在保持MQA速度的同时...

pytorch如何快速创建具有特殊意思的tensor张量?

专栏推荐正文我们通过值可以看到torch.empty并没有进行初始化创建tensor并进行随机初始化操作,常用rand/rand_like,randint正态分布(0,1)指定正态分布的均值还有方差i...