百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Pandas,一个数据分析、处理与可视化无敌的 Python 库!

liuian 2025-02-15 16:32 19 浏览

# 小伙伴们,大家好!今天我们要一起探索的,是Python中一个强大的数据分析、处理与可视化库——Pandas。
如果你经常需要处理数据,无论是做科研、数据分析还是简单的数据整理,Pandas都能成为你的得力助手。
它提供了丰富的数据结构和函数,让数据操作变得简单又高效。
接下来,我们就一起揭开Pandas的神秘面纱吧!

## 一、初识Pandas

Pandas是基于NumPy的一种工具,该工具是为了解决数据分析任务而创建的。
它提供了两种主要的数据结构:**Series**(一维)和**DataFrame**(二维),
这两种数据结构足以满足我们日常大部分的数据处理需求。

### 1. 安装Pandas

在开始使用Pandas之前,我们需要先安装它。如果你还没有安装,可以使用以下命令:

```bash
pip install pandas

2. 导入Pandas

每次使用Pandas前,我们需要先导入它,通常我们会用pd作为别名:

import pandas as pd

二、Series,一维数据的利器

Series是Pandas中的一维数据结构,可以存储任何数据类型。你可以把它想象成一个加强版的Python列表,不仅支持基本的数据操作,还提供了许多便捷的数据处理方法。

1. 创建Series

# 创建一个简单的Series
data = pd.Series([1, 3, 5, 7, 9])
print(data)

运行结果

0    1
1    3
2    5
3    7
4    9
dtype: int64

2. Series的基本操作

# 访问Series中的元素
print(data[0])  # 输出第一个元素
print(data[1:3])  # 切片操作,输出第2到第3个元素

# 修改Series中的元素
data[0] = 10
print(data)

小贴士:Series的索引是从0开始的,和Python的列表一样。

三、DataFrame,二维数据的王者

DataFrame是Pandas中的二维数据结构,类似于Excel中的表格,或者Python中的嵌套列表。它支持非常丰富的操作,是数据分析中的核心工具。

1. 创建DataFrame

# 创建一个简单的DataFrame
data = {
    'Name': ['Alice', 'Bob', 'Charlie'],
    'Age': [25, 30, 35],
    'City': ['New York', 'Los Angeles', 'Chicago']
}
df = pd.DataFrame(data)
print(df)

运行结果

      Name  Age         City
0    Alice   25     New York
1      Bob   30  Los Angeles
2  Charlie   35      Chicago

2. DataFrame的基本操作

# 访问DataFrame中的列
print(df['Name'])  # 访问Name列
print(df[['Name', 'Age']])  # 访问多列

# 访问DataFrame中的行
print(df.loc[0])  # 通过索引标签访问第一行
print(df.iloc[1])  # 通过索引位置访问第二行

# 修改DataFrame中的元素
df.loc[0, 'Age'] = 26
print(df)

小贴士loc是通过索引标签来访问数据的,而iloc是通过索引位置来访问数据的。

3. 常用的DataFrame方法

# 描述统计信息
print(df.describe())  # 输出数值列的统计信息

# 排序
sorted_df = df.sort_values(by='Age')
print(sorted_df)

# 添加新列
df['Salary'] = [70000, 80000, 90000]
print(df)

# 删除列
df.drop('Salary', axis=1, inplace=True)
print(df)

注意事项drop方法中的axis=1表示删除列,inplace=True表示在原DataFrame上修改。

四、数据筛选与过滤

在处理数据时,我们经常需要根据某些条件筛选或过滤数据。Pandas提供了非常便捷的方法来实现这些操作。

1. 条件筛选

# 筛选出年龄大于30的行
filtered_df = df[df['Age'] > 30]
print(filtered_df)

2. 逻辑运算筛选

# 筛选出年龄大于25且城市为New York的行
filtered_df = df[(df['Age'] > 25) & (df['City'] == 'New York')]
print(filtered_df)

小贴士:在逻辑运算中,使用&表示“且”,使用|表示“或”。

五、数据缺失处理

在实际的数据分析中,数据缺失是一个常见的问题。Pandas提供了多种方法来处理缺失数据。

1. 检查缺失数据

# 创建一个包含缺失数据的DataFrame
data = {
    'Name': ['Alice', 'Bob', None],
    'Age': [25, None, 35],
    'City': ['New York', 'Los Angeles', 'Chicago']
}
df = pd.DataFrame(data)
print(df)

# 检查缺失数据
print(df.isnull())  # 返回一个布尔DataFrame,标记缺失值

2. 处理缺失数据

# 删除包含缺失值的行
df_dropped = df.dropna()
print(df_dropped)

# 填充缺失值
df_filled = df.fillna({'Name': 'Unknown', 'Age': 0})
print(df_filled)

小贴士dropna方法默认删除包含任何缺失值的行,可以通过参数how='all'来删除全部为缺失值的行。

六、数据分组与聚合

分组与聚合是数据分析中的重要操作,Pandas的groupby方法让这一切变得简单。

1. 数据分组

# 按城市分组
grouped = df.groupby('City')
print(grouped)

2. 聚合操作

# 计算每个城市的平均年龄
age_mean = grouped['Age'].mean()
print(age_mean)

# 对每个城市的年龄进行求和
age_sum = grouped['Age'].sum()
print(age_sum)

小贴士:除了meansum,Pandas还支持许多其他的聚合函数,如countminmax等。

七、数据可视化

虽然Pandas本身不是专门用于数据可视化的库,但它与Matplotlib等可视化库结合得非常好,可以方便地进行简单的数据可视化。

1. 导入Matplotlib

import matplotlib.pyplot as plt

2. 绘制简单图表

# 绘制年龄的直方图
df['Age'].plot(kind='hist')
plt.xlabel('Age')
plt.ylabel('Frequency')
plt.title('Age Distribution')
plt.show()

小贴士plot方法是Pandas的DataFrame和Series对象自带的,可以非常方便地绘制各种图表。

结语

小伙伴们,今天的Python学习之旅就到这里啦!我们一起探索了Pandas的基本概念和常用操作,包括Series和DataFrame的创建与操作、数据筛选与过滤、数据缺失处理、数据分组与聚合以及简单的数据可视化。Pandas是一个非常强大的库,掌握它将会大大提升你的数据分析能力。记得动手敲代码,多实践才能更深入地理解哦!有问题随时在评论区问猿小哥哦。祝大家学习愉快,Python学习节节高!

相关推荐

快速上手maven

Maven的作用在开发过程中需要用到各种各样的jar包,查找和下载这些jar包是件费时费力的事,特别是英文官方网站,可以将Maven看成一个整合了所有开源jar包的合集,我们需要jar包只需要从Mav...

Windows系统——配置java环境变量

怎么配置java环境变量呢?首先是安装好jdk然后我的电脑右键选择属性然后选择左侧高级系统设置高级然后点环境变量然后在用户变量或系统变量中配置,用户变量指的是只有当前用户可用,系统变量指的是系统中...

ollama本地部署更改默认C盘,Windows配置环境变量方法

ollama是一个大语言模型(LLM——LargeLanguageModel),本地电脑安装网上也要很多教程,看上去非常简单,一直下一步,然后直接就可以使用了。但是我在实操的时候并不是这样,安装完...

# Windows 环境变量 Path 显示样式更改

#怎样学习Java##Windows环境变量Path显示样式更改##1、传统Path环境变量显示:```---》键盘上按【WIN+I】打开系统【设置】---》依次点击---》【系统...

如何在Windows中创建用户和系统环境变量

在Windows中创建环境变量之前您应该了解的事情在按照本指南中所示的任何步骤创建指向文件夹、文件或其他任何内容的用户和系统变量之前,您应该了解两件事。第一个也是最重要的一个是了解什么是环境变量。...

Windows 中的环境变量是什么?

Windows中的环境变量是什么?那么,Windows中的环境变量是什么?简而言之,环境变量是描述应用程序和程序运行环境的变量。所有类型的程序都使用环境变量来回答以下问题:我安装的计算机的名称是什么...

【Python程序开发系列】谈一谈Windows环境变量:系统和用户变量

这是我的第350篇原创文章。一、引言环境变量(environmentvariables)一般是指在操作系统中用来指定操作系统运行环境的一些参数,如:临时文件夹位置和系统文件夹位置等。环境变量是在操作...

系统小技巧:还原Windows10路径环境变量

有时,我们在Windows10的“运行”窗口中执行一些命令或运行一些程序,这时即便没有指定程序的具体路径,只输入程序的名称(如notepad.exe),便可以迅速调用成功。这是因为Windows默认...

Windows10系统的“环境变量”在哪里呢?

当我们在操作系统是Windows10的电脑里安装了一些软件,要通过配置环境变量才能使用软件时,在哪里能找到“环境变量”窗口呢?可以按照下面的步骤找到“环境变量”。说明:下面的步骤和截图是在Window...

系统小技巧:彻底弄懂Windows 10环境变量

每当我们进行系统清理时,清理软件总能自动找到Windows的临时文件夹之所在,然后加以清理,即便是我们重定向了TEMP目录也是如此。究其原因,是因为清理软件会根据TEMP环境变量来判断现有临时文件夹的...

MySQL 5.7 新特性大全和未来展望

本文转自微信公众号:高可用架构作者:杨尚刚引用美图公司数据库高级DBA,负责美图后端数据存储平台建设和架构设计。前新浪高级数据库工程师,负责新浪微博核心数据库架构改造优化,以及数据库相关的服务器存...

MySQL系列-源码编译安装(v8.0.25)

一、前言生产环境建议使用二进制安装法,其优点是部署简单、快速、方便,并且相对"yum/rpm安装"方法能更方便地自定义文件存放的目录结构,方便用脚本批量部署,方便日后运维管理。在生产...

MySQL如何实时同步数据到ES?试试这款阿里开源的神器!

前几天在网上冲浪的时候发现了一个比较成熟的开源中间件——Canal。在了解了它的工作原理和使用场景后,顿时产生了浓厚的兴趣。今天,就让我们跟随我的脚步,一起来揭开它神秘的面纱吧。简介canal翻译为...

技术老兵十年专攻MySQL:编写了763页核心总结,90%MySQL问题全解

MySQL是开放源码的关系数据库管理系统,由于性能高、成本低、可靠性好,成为现在最流行的开源数据库。MySQL学习指南笔记领取方式:关注、转发后私信小编【111】即可免费获得《MySQL进阶笔记》的...

Mysql和Hive之间通过Sqoop进行数据同步

文章回顾理论大数据框架原理简介大数据发展历程及技术选型实践搭建大数据运行环境之一搭建大数据运行环境之二本地MAC环境配置CPU数和内存大小查看CPU数sysctl machdep.cpu...