推荐收藏!10个相见恨晚的Pandas函数,太好用了
liuian 2024-12-20 17:19 78 浏览
Pandas是Python最主要的数据分析库之一,它提供了大量数据结构和函数,能快速对数据进行处理和分析。
Pandas函数有很多,但在处理和分析数据的过程中,有的函数使用频率会更高一些。本篇就分享10个使用频率非常高的Pandas函数。
assign
assign直接向DataFrame对象添加新的一列,可以创建常数列、指定序列数据以及由已知列通过一定计算产生。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.assign(C=[1,2,3,4]) #指定序列数据
df.assign(C=df.A+df.B) #根据已知列数据计算eval
eval执行类似SQL语法中的计算,对已知列执行一定的计算时可用eval完成适用于数据量大的时候,效率会非常高。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.eval('C=A+B') #根据已知列数据计算
add = pd.Series([1,2,3,4])
df.eval('C=A+@add') #通过@符号使用Python的局部变量,@符号表示其后紧随的是一个变量名称而不是列名称query
query类似于SQL中where关键字的语法逻辑,按照DataFrame中某列的规则进行过滤操作,可以说是一个使用最频繁的数据筛选函数了。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.query('A==15') #查询A列数值为5的行
df.query('A<15') #查询A列数值小于5的行apply
apply函数本身不处理数据,而是作为处理数据的调度器。当我们使用for循环遍历DataFrame或Series,数据量大的话会非常慢。而用apply函数会非常快,它自动根据function遍历每一个数据,然后返回一个数据结构为Series的结果。
import pandas as pd
df = pd.DataFrame({'A':['bob','sos','bob','sos','bob','sos','bob','bob'],
'B':['one','one','two','three','two','two','one','three'],
'C':[3,1,4,1,5,9,2,6],
'D':[1,2,3,4,5,6,7,8]})
grouped = df.groupby('A')
for name,group in grouped: #用for遍历
print(name)
print(group)d = grouped.apply(lambda x:x.describe()) #用apply函数
print(d)insert
insert函数可以在指定位置插入一列数据。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
dfadd = pd.Series([1, 2, 3, 4])
df.insert(1, 'X', add) #插入列
print(df)sample
当我们只需要DataFrame中的一部分时,就可以用sample函数从DataFrame中随机选取若干个行或列。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.sample(2) #随机抽取2行
df.sample(frac=0.8) #随机抽取数据的80%explode
当DataFrame中某一行其中一个元素包含多个同类型数据时,就可以用explode函数将一行数据展开成多行,只要一行代码,非常方便。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[[21,22],23,24,[25,26,27]]}
df = pd.DataFrame(data)
dfdf.explode('B') #将B列中有多个元素的数据拆分成多行nunique
nunique函数用于计算行或列上唯一值的数量,即去重后计数。这个函数在实际的数据分析中,非常实用。
import numpy as np
import pandas as pd
data = {'name':['A','B','C','D','A','B'],'age':[21,22,23,23,21,22]}
df = pd.DataFrame(data)
dfdf.name.nunique() #对name列进行唯一值计数 结果为:4replace
replace函数是用来替换DataFrame中的值,赋以新的值。
import numpy as np
import pandas as pd
data = {'name':['A','B','C','D','A','B'],'age':[21,22,23,23,21,22]}
df = pd.DataFrame(data)
dfdf.replace(['A','B'],['E','F'],inplace=True) #如果没有inplace=True的话,原数据不会改变
dfmelt
melt函数是pivot函数的逆转操作函数,用于将宽表变成窄表,即将列名转换为列数据,重构DataFrame。这个操作我们在做数据分析时经常需要用到。
import numpy as np
import pandas as pd
data = {'city':['A','B','C','D'],
'2018data':[22,33,44,55],
'2019data':[12,34,67,89],
'2020data':[80,90,100,110],
'2021data':[120,132,144,178]}
df = pd.DataFrame(data)
dfpd.melt(df,id_vars=['city'],value_vars=['2018data','2019data','2020data','2021data'])以上所说的10个Pandas函数,你最需要哪一个呢?或者还有其他想要实现的功能,可以评论区说给我听哦,下一次说不定就有相关的干货啦!
码代码不易,帮忙留下一个小反馈吧~~
相关推荐
- 怎样解除自动关机模式(怎样解除自动开关机)
-
1、打开手机主界面,找到系统自带的“时钟”应用,点击打开它。2、点击进入时钟后,点击右下角的“计时器”。3、进入到计时器后,点击“在计时结束启用雷达”这个选项。4、然后在这里,下拉到最下面,勾选“停...
- 电脑最高配置是什么配置2025
-
一,2023最新主流电脑装机配置如下。二,处理器可以使用十二代的i512400或者i512490f,内存16gb双通道,显卡rtx3060,主板可以使用b660m或者h610m。三,如果十三代酷睿...
- MySQL慢查询优化:从explain到索引,DBA手把手教你提升10倍性能
-
数据库性能是应用系统的生命线,而慢查询就像隐藏在系统中的定时炸弹。某电商平台曾因一条未优化的SQL导致订单系统响应时间从200ms飙升至8秒,最终引发用户投诉和订单流失。今天我们就来系统学习MySQL...
- 一文读懂SQL五大操作类别(DDL/DML/DQL/DCL/TCL)的基础语法
-
在SQL中,DDL、DML、DQL、DCL、TCL是按操作类型划分的五大核心语言类别,缩写及简介如下:DDL(DataDefinitionLanguage,数据定义语言):用于定义和管理数据库结构...
- 闲来无事,学学Mysql增、删,改,查
-
Mysql增、删,改,查1“增”——添加数据1.1为表中所有字段添加数据1.1.1INSERT语句中指定所有字段名语法:INSERTINTO表名(字段名1,字段名2,…)VALUES(值1...
- 数据库:MySQL 高性能优化规范建议
-
数据库命令规范所有数据库对象名称必须使用小写字母并用下划线分割所有数据库对象名称禁止使用MySQL保留关键字(如果表名中包含关键字查询时,需要将其用单引号括起来)数据库对象的命名要能做到见名识意,...
- 下载工具合集_下载工具手机版
-
迅雷,在国内的下载地位还是很难撼动的,所需要用到的地方还挺多。缺点就是不开会员,软件会限速。EagleGet,全能下载管理器,支持HTTP(S)FTPMMSRTSP协议,也可以使用浏览器扩展检测...
- mediamtx v1.15.2 更新详解:功能优化与问题修复
-
mediamtxv1.15.2已于2025年10月14日发布,本次更新在功能、性能优化以及问题修复方面带来了多项改进,同时也更新了部分依赖库并提升了安全性。以下为本次更新的详细内容:...
- 声学成像仪:泄露监测 “雷达” 方案开启精准防控
-
声学成像仪背景将声像图与阵列上配装的摄像实所拍的视频图像以透明的方式叠合在一起,就形成了可直观分析被测物产生状态。这种利用声学、电子学和信息处理等技术,变换成人眼可见的图像的技术可以帮助人们直观地认识...
- 最稳存储方案:两种方法将摄像头接入威联通Qu405,录像不再丢失
-
今年我家至少被4位邻居敲门,就是为了查监控!!!原因是小区内部监控很早就停止维护了,半夜老有小黄毛掰车门偷东西,还有闲的没事划车的,车主损失不小,我家很早就配备监控了,人来亮灯有一定威慑力,不过监控设...
- 离岗检测算法_离岗检查内容
-
一、研发背景如今社会许多岗位是严禁随意脱离岗位的,如塔台、保安室、监狱狱警监控室等等,因为此类行为可能会引起重大事故,而此类岗位监督管理又有一定困难,因此促生了智能视频识别系统的出现。二、产品概述及工...
- 消防安全通道占用检测报警系统_消防安全通道占用检测报警系统的作用
-
一、产品概述科缔欧消防安全通道占用检测报警系统,是创新行业智能监督管理方式、完善监管部门动态监控及预警预报体系的信息化手段,是实现平台远程监控由“人为监控”向“智能监控”转变的必要手段。产品致力于设...
- 外出住酒店、民宿如何使用手机检测隐藏的监控摄像头
-
最近,一个家庭在他们的民宿收到了一个大惊喜:客厅里有一个伪装成烟雾探测器的隐藏摄像头,监视着他们的一举一动。隐藏摄像头的存在如果您住在酒店或民宿,隐藏摄像头不应再是您的担忧。对于民宿,房东应报告所有可...
- 基于Tilera众核平台的流媒体流量发生系统的设计
-
曾帅,高宗彬,赵国锋(重庆邮电大学通信与信息工程学院,重庆400065)摘要:设计了一种基于Tilera众核平台高强度的流媒体流量发生系统架构,其主要包括:系统界面管理模块、服务承载模块和流媒体...
- 使用ffmpeg将rtsp流转流实现h5端播放
-
1.主要实现rtsp转tcp协议视频流播放ffmpeg下载安装(公认业界视频处理大佬)a、官网地址:www.ffmpeg.org/b、gitHub:github.com/FFmpeg/FFmp…c、推...
- 一周热门
- 最近发表
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)
- mysql刷新权限 (34)
