Python数据分析利器,Pandas入门介绍,帮你便捷高效处理复杂数据
liuian 2025-05-02 11:47 29 浏览
关于Python的数据分析,当我们遇到的数据量小、数据结构简单时,可以通过字典、列表等Python常见的数据结构来处理。但是当我们面对的大量数据以及复杂数据的局面时,就需要用一些专门用于数据分析的扩展库来处理数据了。
今天给大家介绍一个Python里专门用来做数据分析和处理的扩展库。
pandas(pannel data analysis,面板数据分析),我个人觉得pandas用于数据分析处理有别于Python字典和列表的主要在于以下三点。
- 运算效率提升,pandas是基于numpy写的,换句话说也是c语言进行编写并编译成本地库的,在运算效率会高很多。
- 消耗资源少,因为pandas采用矩阵运算,在算法结构上比列表和字典组合数据消耗更少资源。
- pandas的矩阵运算可以帮我们结构化成表格数据,省去大量自己拼接表格数据的代码开销。
本章知识点:
- pandas 安装和使用
- pandas 数据结构(Series)
- pandas 数据结构(DataFrame)
pandas 安装和使用
通过 pip install pandas可以直接安装安装pandas和相关联的库。
提示安装成功之后我们尝试在编辑器里 import pandas 并运行,没有报错即视为安装pandas库成功。
数据结构(Series)
Series是pandas两个重要数据结构中的其中一个,Series的中文意思为(一系列;连续;接连)。它其实是一个一维数组和另一个一维数组(数据对应的索引index)相结合产生的一个数据结构。
一维数组长什么样呢?
[1,2,3,4] 这个列表就是一个一维数组。
[[1,2,3,4], [2,3,4,5]]这个列表就是一个二维数组,以此类推。
现在我们通过Series来创建一组数据。
以上三行代码揭示了如何创建一个Series数据结构。
- 首先引入pandas的Series包,Series本身也是作为一个类存在的。
- 通过给Series类传入一个列表(list),得到它的实例化对象,赋值给变量series
- 最后输出series对象,我们会发现它自动在列表的每一个元素前面加上了索引
Series数据结构有什么实用价值?
Series可以用来存储一行或一列数据,以及与其相关的索引集合
简单的说,当我们有一个一维数组数据时,可以通过Series快速方便的帮我们给它加上索引,便于查询和使用。
大家可以想象成Series可以把一个列表变成一个字典进行访问。
参考一下例子:
大家可以通过上面的代码发现:
- 我们可以通过values直接取出series的所有值,实际上就是一个数组。
- 通过对series取元素key名的方式( series[0] )可以获得具体的值。
- 可以将series作为一个字典进行遍历,取出其所有的Key和Value。
有朋友可能会疑惑一个问题,series[0]究竟是取的下标位置还是取的Key名?其实我们取的是Key名,因为我们在实例化Series时默认只传了一个列表参数,所以系统自动帮我们加上了从0开始的key名,现在我们试试自定义Series的Index参数。
Series在实例化时可以接受两个参数,第一个是值的序列,第二个是索引的序列。
想想我们开始怎么介绍Series的?Series其实是一个一维数组和另一个一维数组(数据对应的索引index)相结合产生的一个数据结构。
通过字典创建Series
我们同样可以用字典来创建一个Series,因为它的数据结构和Series的数据结构天然吻合。
如上图代码所示,我们在实例化Series时传一个字典数据进去即可。
Series修改数据
现在我们想设计这么一个数据结构。
dic1 = {"吕布":100 ,"关羽":100 ,"张飞":100 }
dic2 = {"吕布":100 ,"关羽":100 ,"张飞":100 }
用两个字典来分别定义三个武将的生命值,然后希望把这两个字典里相同key的值进行相加,看看会得到什么样的结果。
通过两个series相加,我们得到了想要的数据。
数据结构(DataFrame)
在pandas中,DataFrame是一个类似于表格的数据结构,它的索引包括 列索引和行索引,包含有一组有序的列,每个列都可以是不同的数据类型(数字、字符串等等)。
简单的说就是 DataFrame的每一行和每一列都是由Series组成的。
现在让我们来定义个DataFrame:
通过以上代码我们利用一个简单的字典数据结构创建了一个DataFrame,输出内容也像极了表格。
第一列默认是行号索引,第二列到第四列分别是我们之前定义的数据。
开始我们讲到在DataFrame中每一行或者每一列数据都是一个Series,现在我们通过以下代码来验证这个说法。
如上图所示,我们通过对DataFrame对象取key名的方式得到一个Series对象,然后就可以对Series对象进行各种操作了。
修改DataFrame的数据
现在我们希望把所有人的生命值都调整到100,参考下列代码。
如上图所示,通过对 df[Key名] 的内容进行直接赋值,可以修改整个Series的值。
我们同样可以用 df.生命值 = 100的语法来进行赋值,DataFrame已经自动帮我们把Key名转换为对象的属性了。
导出DataFrame表格数据
如果我们希望将DataFrame的数据导出成表格文件,pandas也同样支持,我们可以通过很简单的语法即可实现。
DataFrame.to_csv(文件名)即可将数据导出为一个csv文件。
让我们来看看导出文件在表格软件里的展现。
一般情况下,我们只能通过DataFrame进行csv文件的导出,不支持对Series导出。
总结:
今天给大家简单介绍了pandas两种数据结构Series、DataFrame的用处,这对于我们如何理解pandas进行数据分析是一个好的开始,不过对于完整的学习pandas来说还远远不够,我们将在以后的章节里继续学习pandas的各种知识,把它变成我们的数据分析利器,更好的应用于工作当中。
文章最后我会用一个思维导图来总结本章的知识点:
欢迎关注我 “纸飞机编程”,获取更多有趣的Python编程信息。
相关推荐
- eino v0.4.5版本深度解析:接口类型处理优化与错误机制全面升级
-
近日,eino框架发布了v0.4.5版本,该版本在错误处理、类型安全、流处理机制以及代理配置注释等方面进行了多项优化与修复。本次更新共包含6个提交,涉及10个文件的修改,由2位贡献者共同完成。本文将详...
- SpringBoot异常处理_springboot异常注解
-
在SpringBoot中,异常处理是构建健壮、可维护Web应用的关键部分。良好的异常处理机制可以统一返回格式、提升用户体验、便于调试和监控。以下是SpringBoot中处理异常的完整指...
- Jenkins运维之路(Jenkins流水线改造Day02-1-容器项目)
-
这回对线上容器服务器的流水线进行了一定的改造来满足目前线上的需求,还是会将所有的自动化脚本都放置到代码库中统一管理,我感觉一章不一定写的完,所以先给标题加了个-1,话不多说开干1.本次流水线的流程设计...
- 告别宕机!零基础搭建服务器监控告警系统!小白也能学会!
-
前言本文将带你从零开始,一步步搭建一个完整的服务器指标监控与邮件告警系统,使用的技术栈均为业界主流、稳定可靠的开源工具:Prometheus:云原生时代的监控王者,擅长指标采集与告警规则定义Node_...
- httprunner实战接口测试笔记,拿走不谢
-
每天进步一点点,关注我们哦,每天分享测试技术文章本文章出自【码同学软件测试】码同学公众号:自动化软件测试码同学抖音号:小码哥聊软件测试01开始安装跟创建项目pipinstallhttprunne...
- 基于JMeter的性能压测平台实现_jmeter压测方案
-
这篇文章已经是两年前写的,短短两年时间,JMeter开源应用技术的发展已经是翻天覆地,最初由github开源项目zyanycall/stressTestPlatform形成的这款测试工具也开始慢...
- 12K+ Star!新一代的开源持续测试工具!
-
大家好,我是Java陈序员。在企业软件研发的持续交付流程中,测试环节往往是影响效率的关键瓶颈,用例管理混乱、接口调试复杂、团队协作不畅、与DevOps流程脱节等问题都能影响软件交付。今天,给大家...
- Spring Boot3 中分库分表之后如何合并查询
-
在当今互联网应用飞速发展的时代,数据量呈爆发式增长。对于互联网软件开发人员而言,如何高效管理和查询海量数据成为了一项关键挑战。分库分表技术应运而生,它能有效缓解单库单表数据量过大带来的性能瓶颈。而在...
- 离线在docker镜像方式部署ragflow0.17.2
-
经常项目上会出现不能连外网的情况,要怎么使用ragflow镜像部署呢,这里提供详细的步骤。1、下载基础镜像根据docker-compose-base.yml及docker-compose.yml中的i...
- 看,教你手写一个最简单的SpringBoot Starter
-
何为Starter?想必大家都使用过SpringBoot,在SpringBoot项目中,使用最多的无非就是各种各样的Starter了。那何为Starter呢?你可以理解为一个可拔插式...
- 《群星stellaris》军事基地跳出怎么办?解决方法一览
-
《群星stellaris》军事基地跳出情况有些小伙伴出现过这种情况,究竟该怎么解决呢?玩家“gmjdadk”分享的自己的解决方法,看看能不能解决。我用英文原版、德语、法语和俄语四个版本对比了一下,结果...
- 数据开发工具dbt手拉手教程-03.定义数据源模型
-
本章节介绍在dbt项目中,如何定义数据源模型。定义并引入数据源通过Extract和Load方式加载到仓库中的数据,可以使用dbt中的sources组件进行定义和描述。通过在dbt中将这些数据集(表)声...
- docker compose 常用命令手册_docker-compose init
-
以下是DockerCompose常用命令手册,按生命周期管理、服务运维、构建配置、扩缩容、调试工具分类,附带参数解析、示例和关键说明,覆盖多容器编排核心场景:一、生命周期管理(核心命令...
- RagFlow与DeepSeek R1本地知识库搭建详细步骤及代码实现
-
一、环境准备硬件要求独立显卡(建议NVIDIAGPU,8GB显存以上)内存16GB以上,推荐32GB(处理大规模文档时更高效)SSD硬盘(加速文档解析与检索)软件安装bash#必装组件Docker...
- Docker Compose 配置更新指南_docker-compose配置
-
高效管理容器配置变更的最佳实践方法重启范围保留数据卷适用场景docker-composeup-d变更的服务常规配置更新--force-recreate指定/所有服务强制重建down→up流程...
- 一周热门
-
-
【验证码逆向专栏】vaptcha 手势验证码逆向分析
-
Python实现人事自动打卡,再也不会被批评
-
Psutil + Flask + Pyecharts + Bootstrap 开发动态可视化系统监控
-
一个解决支持HTML/CSS/JS网页转PDF(高质量)的终极解决方案
-
再见Swagger UI 国人开源了一款超好用的 API 文档生成框架,真香
-
网页转成pdf文件的经验分享 网页转成pdf文件的经验分享怎么弄
-
C++ std::vector 简介
-
飞牛OS入门安装遇到问题,如何解决?
-
系统C盘清理:微信PC端文件清理,扩大C盘可用空间步骤
-
10款高性能NAS丨双十一必看,轻松搞定虚拟机、Docker、软路由
-
- 最近发表
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)
- mysql刷新权限 (34)