Python数据分析利器,Pandas入门介绍,帮你便捷高效处理复杂数据
liuian 2025-05-02 11:47 21 浏览
关于Python的数据分析,当我们遇到的数据量小、数据结构简单时,可以通过字典、列表等Python常见的数据结构来处理。但是当我们面对的大量数据以及复杂数据的局面时,就需要用一些专门用于数据分析的扩展库来处理数据了。
今天给大家介绍一个Python里专门用来做数据分析和处理的扩展库。
pandas(pannel data analysis,面板数据分析),我个人觉得pandas用于数据分析处理有别于Python字典和列表的主要在于以下三点。
- 运算效率提升,pandas是基于numpy写的,换句话说也是c语言进行编写并编译成本地库的,在运算效率会高很多。
- 消耗资源少,因为pandas采用矩阵运算,在算法结构上比列表和字典组合数据消耗更少资源。
- pandas的矩阵运算可以帮我们结构化成表格数据,省去大量自己拼接表格数据的代码开销。
本章知识点:
- pandas 安装和使用
- pandas 数据结构(Series)
- pandas 数据结构(DataFrame)
pandas 安装和使用
通过 pip install pandas可以直接安装安装pandas和相关联的库。
提示安装成功之后我们尝试在编辑器里 import pandas 并运行,没有报错即视为安装pandas库成功。
数据结构(Series)
Series是pandas两个重要数据结构中的其中一个,Series的中文意思为(一系列;连续;接连)。它其实是一个一维数组和另一个一维数组(数据对应的索引index)相结合产生的一个数据结构。
一维数组长什么样呢?
[1,2,3,4] 这个列表就是一个一维数组。
[[1,2,3,4], [2,3,4,5]]这个列表就是一个二维数组,以此类推。
现在我们通过Series来创建一组数据。
以上三行代码揭示了如何创建一个Series数据结构。
- 首先引入pandas的Series包,Series本身也是作为一个类存在的。
- 通过给Series类传入一个列表(list),得到它的实例化对象,赋值给变量series
- 最后输出series对象,我们会发现它自动在列表的每一个元素前面加上了索引
Series数据结构有什么实用价值?
Series可以用来存储一行或一列数据,以及与其相关的索引集合
简单的说,当我们有一个一维数组数据时,可以通过Series快速方便的帮我们给它加上索引,便于查询和使用。
大家可以想象成Series可以把一个列表变成一个字典进行访问。
参考一下例子:
大家可以通过上面的代码发现:
- 我们可以通过values直接取出series的所有值,实际上就是一个数组。
- 通过对series取元素key名的方式( series[0] )可以获得具体的值。
- 可以将series作为一个字典进行遍历,取出其所有的Key和Value。
有朋友可能会疑惑一个问题,series[0]究竟是取的下标位置还是取的Key名?其实我们取的是Key名,因为我们在实例化Series时默认只传了一个列表参数,所以系统自动帮我们加上了从0开始的key名,现在我们试试自定义Series的Index参数。
Series在实例化时可以接受两个参数,第一个是值的序列,第二个是索引的序列。
想想我们开始怎么介绍Series的?Series其实是一个一维数组和另一个一维数组(数据对应的索引index)相结合产生的一个数据结构。
通过字典创建Series
我们同样可以用字典来创建一个Series,因为它的数据结构和Series的数据结构天然吻合。
如上图代码所示,我们在实例化Series时传一个字典数据进去即可。
Series修改数据
现在我们想设计这么一个数据结构。
dic1 = {"吕布":100 ,"关羽":100 ,"张飞":100 }
dic2 = {"吕布":100 ,"关羽":100 ,"张飞":100 }
用两个字典来分别定义三个武将的生命值,然后希望把这两个字典里相同key的值进行相加,看看会得到什么样的结果。
通过两个series相加,我们得到了想要的数据。
数据结构(DataFrame)
在pandas中,DataFrame是一个类似于表格的数据结构,它的索引包括 列索引和行索引,包含有一组有序的列,每个列都可以是不同的数据类型(数字、字符串等等)。
简单的说就是 DataFrame的每一行和每一列都是由Series组成的。
现在让我们来定义个DataFrame:
通过以上代码我们利用一个简单的字典数据结构创建了一个DataFrame,输出内容也像极了表格。
第一列默认是行号索引,第二列到第四列分别是我们之前定义的数据。
开始我们讲到在DataFrame中每一行或者每一列数据都是一个Series,现在我们通过以下代码来验证这个说法。
如上图所示,我们通过对DataFrame对象取key名的方式得到一个Series对象,然后就可以对Series对象进行各种操作了。
修改DataFrame的数据
现在我们希望把所有人的生命值都调整到100,参考下列代码。
如上图所示,通过对 df[Key名] 的内容进行直接赋值,可以修改整个Series的值。
我们同样可以用 df.生命值 = 100的语法来进行赋值,DataFrame已经自动帮我们把Key名转换为对象的属性了。
导出DataFrame表格数据
如果我们希望将DataFrame的数据导出成表格文件,pandas也同样支持,我们可以通过很简单的语法即可实现。
DataFrame.to_csv(文件名)即可将数据导出为一个csv文件。
让我们来看看导出文件在表格软件里的展现。
一般情况下,我们只能通过DataFrame进行csv文件的导出,不支持对Series导出。
总结:
今天给大家简单介绍了pandas两种数据结构Series、DataFrame的用处,这对于我们如何理解pandas进行数据分析是一个好的开始,不过对于完整的学习pandas来说还远远不够,我们将在以后的章节里继续学习pandas的各种知识,把它变成我们的数据分析利器,更好的应用于工作当中。
文章最后我会用一个思维导图来总结本章的知识点:
欢迎关注我 “纸飞机编程”,获取更多有趣的Python编程信息。
相关推荐
- 使用Assembly打包和部署Spring Boot工程
-
SpringBoot项目的2种部署方式目前来说,SpringBoot项目有如下2种常见的部署方式一种是使用docker容器去部署。将SpringBoot的应用构建成一个docke...
- java高级用法之:调用本地方法的利器JNA
-
简介JAVA是可以调用本地方法的,官方提供的调用方式叫做JNI,全称叫做javanativeinterface。要想使用JNI,我们需要在JAVA代码中定义native方法,然后通过javah命令...
- Linux中如何通过Shell脚本来控制Spring Boot的Jar包启停服务?
-
SpringBoot项目在为开发者带来方便的同时,也带来了一个新的问题就是Jar包如何启动?在一般情况下我们都是采用了最为经典的java-jar命令来进行启动。然后通过ps命令找到对应的应用线程通...
- 牛逼!自己手写一个热加载(人民币手写符号一个横还是两个横)
-
热加载:在不停止程序运行的情况下,对类(对象)的动态替换JavaClassLoader简述Java中的类从被加载到内存中到卸载出内存为止,一共经历了七个阶段:加载、验证、准备、解析、初始化、使用、...
- java 错误: 找不到或无法加载主类?看看怎么解决吧!
-
问题扫述:项目名称调整,由原来的com.mp.qms.report.biz调整为com.mp.busicen.mec.qms.report.biz后。项目在IDEA直接运行,但打包部署到服务器...
- 如何将 Spring Boot 工程打包成独立的可执行 JAR 包
-
导语:通过将SpringBoot项目打包成独立的可执行JAR包,可以方便地在任何支持Java环境的机器上运行项目。本文将详细介绍如何通过Maven构建插件将SpringBoot...
- class 增量发包改造为 jar 包方式发布
-
大纲class增量发包介绍项目目录结构介绍jar包方式发布落地方案class增量发包介绍当前项目的迭代修复都是通过class增量包来发版本的将改动的代码class增量打包,如下图cla...
- Jar启动和IDE里启动Sprintboot的区别
-
想聊明白这个问题,需要补充一些前提条件,比如Fatjar、类加载机制等1、Fatjar我们在开发业务程序的时候,经常需要引用第三方的jar包,最终程序开发完成之后,通过打包程序,会把自己的代码和三...
- Java 20年,以后将往哪儿走?(java还能流行多久)
-
在今年的Java20周年的庆祝大会中,JavaOne2015的中心议题是“Java的20年”。甲骨文公司Java平台软件开发部的副总裁GeorgesSaab的主题演讲就将关注点放在了java...
- Spring Boot Jar 包秒变 Docker 镜像实现多环境部署
-
你是否在互联网大厂后端开发工作中,遇到过这样的困扰?当完成一个SpringBoot项目开发,准备将Jar包部署到不同环境时,却发现各个环境依赖不同、配置复杂,部署过程繁琐又容易出错,不仅耗费...
- 从0开始,让你的Spring Boot项目跑在Linux服务器
-
1搭建Linux服务器1.1购买阿里云服务器或安装虚拟机这里建议是CentOS7.X或CentOS8.X,当然其他的Linux如deepin、Ubuntu也可以,只是软件环境的安装包和安装方式...
- 【技术】Maven 上传第三方jar包到私服
-
通过nexus后台上传私服以NexusRepositoryManagerOSS2.14.5-02为例。登录nexus后台。定义Maven坐标Maven坐标有两种方式:1.自定义参数;2....
- JVM参数、main方法的args参数使用
-
一、前言我们知道JVM参数分为自定义参数、JVM系统参数,Javamain方法的参数。今天就谈谈怎么使用吧。二、查看jvm参数定义自定义参数我们打开cmd窗口,输入java,就能看到自定义参数的格式...
- Maven项目如何发布jar包到Nexus私服
-
Maven项目发布jar包到Nexus私服在编码过程中,有些通用的代码模块,有时候我们不想通过复制粘贴来粗暴地复用。因为这样不仅体现不了变化,也不利于统一管理。这里我们使用mavendeploy的方...
- 干货丨Hadoop安装步骤!详解各目录内容及作用
-
Hadoop是Apache基金会面向全球开源的产品之一,任何用户都可以从ApacheHadoop官网下载使用。今天,播妞将以编写时较为稳定的Hadoop2.7.4版本为例,详细讲解Hadoop的安...
- 一周热门
-
-
Python实现人事自动打卡,再也不会被批评
-
【验证码逆向专栏】vaptcha 手势验证码逆向分析
-
Psutil + Flask + Pyecharts + Bootstrap 开发动态可视化系统监控
-
一个解决支持HTML/CSS/JS网页转PDF(高质量)的终极解决方案
-
再见Swagger UI 国人开源了一款超好用的 API 文档生成框架,真香
-
网页转成pdf文件的经验分享 网页转成pdf文件的经验分享怎么弄
-
C++ std::vector 简介
-
系统C盘清理:微信PC端文件清理,扩大C盘可用空间步骤
-
10款高性能NAS丨双十一必看,轻松搞定虚拟机、Docker、软路由
-
python使用fitz模块提取pdf中的图片
-
- 最近发表
-
- 使用Assembly打包和部署Spring Boot工程
- java高级用法之:调用本地方法的利器JNA
- Linux中如何通过Shell脚本来控制Spring Boot的Jar包启停服务?
- 牛逼!自己手写一个热加载(人民币手写符号一个横还是两个横)
- java 错误: 找不到或无法加载主类?看看怎么解决吧!
- 如何将 Spring Boot 工程打包成独立的可执行 JAR 包
- class 增量发包改造为 jar 包方式发布
- Jar启动和IDE里启动Sprintboot的区别
- Java 20年,以后将往哪儿走?(java还能流行多久)
- Spring Boot Jar 包秒变 Docker 镜像实现多环境部署
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- table.render (33)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)