百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

【Python常用库】10 分钟掌握Pandas库基本操作(四)

liuian 2025-01-12 16:25 19 浏览

喜欢的条友记得关注、点赞、转发、收藏,你们的支持就是我最大的动力源泉。

亲爱的数据探索者们,你们好!如果你对挖掘数据的深层含义充满好奇,那么这篇文章将是你的理想指南。请跟随我一起,我们将深入探索Python中的pandas库,这是数据分析的瑞士军刀。


首先,你需要先安装Python程序和开发环境:

「Python3.11.0」手把手教你安装最新版Python运行环境

Python启航:30天编程速成之旅(第2天)-IDE安装

【Python教程】JupyterLab 开发环境安装


在上一次的课程中,我们一起探索了如何处理缺失数据以及进行基本的数据操作。今天,我将继续带领大家深入学习如何使用 Pandas 进行数据统计分析、自定义函数的应用以及字符串处理技巧。

统计

首先,让我们来看一看如何在排除缺失数据的情况下进行统计分析。我们将演示如何计算数据框中各列的平均值,以及如何按照行来计算平均值。

计算每列的平均值

首先,我们需要创建一个包含随机数据的 DataFrame。这里,我们将使用 Pandas 提供的 date_range 函数来生成一个日期范围,然后结合 Numpy 生成的随机数来构建 DataFrame。

import pandas as pd
import numpy as np

# 使用pandas的date_range函数创建一个包含连续日期的PeriodRange对象。
# 这里从"20241001"(2024年10月1日)开始,创建7个连续日期。
my_date = pd.date_range("20241001", periods=7)

# 使用numpy的randn函数生成一个7行4列的随机数数组。
# 然后使用这些随机数和之前创建的日期索引来创建一个DataFrame。
# 数据框的列标签设置为中文'第一次', '第二次', '第三次', '第四次'。
df = pd.DataFrame(np.random.randn(7, 4), index=my_date, columns=['第一次', '第二次', '第三次', '第四次'])

# 计算每列的平均值
df.mean()

计算每行的平均值

同样地,我们也可以方便地计算每行的平均值:

# 计算每行的平均值
df.mean(axis=1)

当使用具有不同索引或列的另一个 Series 或 DataFrame 进行操作时,结果将会按照索引或列标签的并集对齐。此外,Pandas 会在指定的维度上自动广播,并使用 np.nan 填充那些无法对齐的位置。

让我们通过一个具体的例子来说明这一点:

在这个例子中,我们创建了一个新的 Series s,其中包含了一些数值和一个 np.nan。通过调用 shift(1) 方法,我们将索引向后移动了一个位置。这意味着原始序列中的第一个元素将会变成 np.nan,因为没有更早的数据可以填充这个位置。

输出的 Series 将会像这样:

s = pd.Series([1, 2, 3, np.nan, 4, 5, 6], index=my_date).shift(1)
s

用户定义的函数

Pandas 的 DataFrame 提供了 .agg() 和 .transform() 方法,允许我们应用自定义的函数来对数据进行聚合或转换。

df.agg(lambda x: np.mean(x) * 2)
df.transform(lambda x: x * 10)

值计数

如果我们想统计某个 Series 中各个唯一值出现的次数,可以使用 value_counts() 方法:

df.value_counts()

字符串方法

Pandas 的 Series 类型内置了许多方便的字符串处理方法,这些方法可以直接作用于 Series 的每一个元素上。例如,我们可以轻松地将所有字符串转换成小写:

s = pd.Series(["fENG", "a", "A", "AAbb", np.nan, "CHINA", "cHINA", "China"])
s.str.lower()

通过上述示例,我们可以看到 Pandas 提供了多么强大的数据分析能力。无论是基础的数值计算还是复杂的字符串处理,Pandas 都能帮助我们高效地完成任务。希望今天的分享能让大家对 Python 数据处理有更深的理解。

喜欢的条友记得关注、点赞、转发、收藏,你们的支持就是我最大的动力源泉。

相关推荐

2023年最新微信小程序抓包教程(微信小程序 抓包)

声明:本公众号大部分文章来自作者日常学习笔记,部分文章经作者授权及其他公众号白名单转载。未经授权严禁转载。如需转载,请联系开百。请不要利用文章中的相关技术从事非法测试。由此产生的任何不良后果与文...

测试人员必看的软件测试面试文档(软件测试面试怎么说)

前言又到了毕业季,我们将会迎来许多需要面试的小伙伴,在这里呢笔者给从事软件测试的小伙伴准备了一份顶级的面试文档。1、什么是bug?bug由哪些字段(要素)组成?1)将在电脑系统或程序中,隐藏着的...

复活,视频号一键下载,有手就会,长期更新(2023-12-21)

视频号下载的话题,也算是流量密码了。但也是比较麻烦的问题,频频失效不说,使用方法也难以入手。今天,奶酪就来讲讲视频号下载的新方案,更关键的是,它们有手就会有用,最后一个方法万能。实测2023-12-...

新款HTTP代理抓包工具Proxyman(界面美观、功能强大)

不论是普通的前后端开发人员,还是做爬虫、逆向的爬虫工程师和安全逆向工程,必不可少会使用的一种工具就是HTTP抓包工具。说到抓包工具,脱口而出的肯定是浏览器F12开发者调试界面、Charles(青花瓷)...

使用Charles工具对手机进行HTTPS抓包

本次用到的工具:Charles、雷电模拟器。比较常用的抓包工具有fiddler和Charles,今天讲Charles如何对手机端的HTTS包进行抓包。fiddler抓包工具不做讲解,网上有很多fidd...

苹果手机下载 TikTok 旧版本安装包教程

目前苹果手机能在国内免拔卡使用的TikTok版本只有21.1.0版本,而AppStore是高于21.1.0版本,本次教程就是解决如何下载TikTok旧版本安装包。前期准备准备美区...

【0基础学爬虫】爬虫基础之抓包工具的使用

大数据时代,各行各业对数据采集的需求日益增多,网络爬虫的运用也更为广泛,越来越多的人开始学习网络爬虫这项技术,K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章,为实现从易到难全方位覆盖,特设【0基础学爬...

防止应用调试分析IP被扫描加固实战教程

防止应用调试分析IP被扫描加固实战教程一、概述在当今数字化时代,应用程序的安全性已成为开发者关注的焦点。特别是在应用调试过程中,保护应用的网络安全显得尤为重要。为了防止应用调试过程中IP被扫描和潜在的...

一文了解 Telerik Test Studio 测试神器

1.简介TelerikTestStudio(以下称TestStudio)是一个易于使用的自动化测试工具,可用于Web、WPF应用的界面功能测试,也可以用于API测试,以及负载和性能测试。Te...

HLS实战之Wireshark抓包分析(wireshark抓包总结)

0.引言Wireshark(前称Ethereal)是一个网络封包分析软件。网络封包分析软件的功能是撷取网络封包,并尽可能显示出最为详细的网络封包资料。Wireshark使用WinPCAP作为接口,直接...

信息安全之HTTPS协议详解(加密方式、证书原理、中间人攻击 )

HTTPS协议详解(加密方式、证书原理、中间人攻击)HTTPS协议的加密方式有哪些?HTTPS证书的原理是什么?如何防止中间人攻击?一:HTTPS基本介绍:1.HTTPS是什么:HTTPS也是一个...

Fiddler 怎么抓取手机APP:抖音、小程序、小红书数据接口

使用Fiddler抓取移动应用程序(APP)的数据接口需要进行以下步骤:首先,确保手机与计算机连接在同一网络下。在计算机上安装Fiddler工具,并打开它。将手机的代理设置为Fiddler代理。具体方...

python爬虫教程:教你通过 Fiddler 进行手机抓包

今天要说说怎么在我们的手机抓包有时候我们想对请求的数据或者响应的数据进行篡改怎么做呢?我们经常在用的手机手机里面的数据怎么对它抓包呢?那么...接下来就是学习python的正确姿势我们要用到一款强...

Fiddler入门教程全家桶,建议收藏

学习Fiddler工具之前,我们先了解一下Fiddler工具的特点,Fiddler能做什么?如何使用Fidder捕获数据包、修改请求、模拟客户端向服务端发送请求、实施越权的安全性测试等相关知识。本章节...

fiddler如何抓取https请求实现手机抓包(100%成功解决)

一、HTTP协议和HTTPS协议。(1)HTTPS协议=HTTP协议+SSL协议,默认端口:443(2)HTTP协议(HyperTextTransferProtocol):超文本传输协议。默认...