百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

「Python数据分析」Pandas进阶,使用merge()函数合并数据

liuian 2025-04-06 18:05 42 浏览

在使用python语言进行数据分析的过程中,我们的数据,有很大一部分是结构化数据,也就是比较整齐的数据。

这里,我不展开讲什么是结构化数据,因为这个范围太过于庞大。但是,有一个知识点,必须要讲一下。这个知识点就是,数据的主键。

之前,我们讲过利用concat函数进行数据合并操作。通常情况下,concat函数只是把各种原始数据集,一股脑的按照行,或者是列,进行合并。

通俗点讲,就是把数据直接一锅粥的放在一起,不考虑数据的结构问题,因为行和列缺失的话,都可以通过缺失值来进行填补。

数据的主键

而今天要讲的merge函数,等同于SQL语言中的连接语句,需要使用到数据的主键,也就是需要满足关系型数据库的第二范式。

这部分内容,过于抽象,我们使用merge函数进行数据连接操作,只需要知道数据的主键。也就是说,我们的数据集中,至少要有一列(通常是放在第一列),这一列中的数据,不允许出现重复值,能够唯一标识我们数据集中,每一行的值。

比如说,我们的人员信息表中的数据集,可能会有:身份证号码,姓名,年龄,等等数据。那么,身份证号码这一列,就是我们人员信息表的主键列,我们每个人,都可以通过身份证号码来唯一标识,因为我们每一个人,都只有一个身份证号码,不会重复。

数据连接的类型

使用merge函数连接数据,和使用sql语言命令连接数据,基本一致,也是有三种连接的类型。

一对一连接

这种连接方式,适用于同一批数据,分散在不同的数据集中的情况。

比如说,我们的个人信息,可能就会分为基本信息部分,教育信息部分,工作信息部分等等。每一部分信息,都是通过身份证号码的关键字来唯一标识。

这样,我们就可以通过一对一连接,把这几部分,都是表示我们个人信息的数据集,连接起来,以便后续进行分析和处理。

多对一连接

这里,我举例来进行说明。比如说,假设我们是订单处理员,我们每天会处理很多个订单。那么,订单和处理员的关系,就是多对一的关系。

在订单中,需要加入处理员的身份证号码,用来确认这个订单是某个处理员完成的。这样的话,我们就可以通过身份证号码,把订单数据和处理员数据,连接起来,形成一个新的数据集。

多对多连接

多对多连接,是比较抽象的一种连接过程。我还是通过例子,来帮助大家了解这种连接方式。

比如说,我们的政府部门,会有就业数据。在就业数据中,求职者可以向多个公司求职,而公司呢,也可以接受多个求职者的求职请求。

这种情况下,求职者和公司之间,就是多对多的关系。我们的政府,如果需要对就业数据进行分析处理的话,就需要把求职者和公司,通过多对多的连接方式,把数据连接起来。

一对一连接例子

我们先来看一个一对一连接的简单例子。

连接过程如下图所示

原始数据生成

原始数据集

使用merge函数,通过key连接

以上,就是一个一对一数据集连接的例子。在数据集left和right中,key完全一致,即表示两个数据集是一对一关系。

这样,就可以通过key关键字,把两个数据集中的数据,按照列的顺序,连接在一起,key关键字列保持不变。

左连接

在左连接中,merge函数的方法是:left,SQL语句的连接名称是:LEFT OUTER JOIN。

左连接表示的含义是,以左边数据集中的关键字为参照,连接左右两边的数据集。连接完成后的新数据集,保留左边数据集中的数据。右边数据集的列加入左边数据集,并且右边数据集中的关键字和左边数据集相等的话,填充加入列的数据。

我们还是通过例子进行说明

连接过程图示

生成原始数据集

原始数据格式

连接过程

我们可以观察数据,这里是通过left方法进行连接,所以保留left数据集中的数据。然后,我们是用联合主键的形式,也就是key1和key2联合起来进行连接。K1和K0,在left数据集中出现了一次,在right数据集中出现了两次,所以结果数据集中,就有两行K1和K0标识的数据集。

右连接

在右连接中,merge函数的方法是:right,SQL语句的连接名称是:RIGHT OUTER JOIN。

连接过程图示

连接过程

注意这里是以右侧数据集right为基准,所以保留right数据集中的数据,把left中的列,加入到right中,通过联合主键key1和key2进行连接。

外连接

在外连接中,merge函数的方法是:outer,SQL语句的连接名称是:FULL OUTER JOIN。

连接过程图示

连接过程

外连接,其实就是把左边和右边的主键全部放在一起,两边都有的主键,就回填所有列的数据。如果left没有的主键,则left的列,在新数据集中回填空值,right则相反。

内连接

在内连接中,merge函数的方法是:inner,SQL语句的连接名称是:INNER JOIN。

连接过程图示

连接过程

内连接可以这样理解,那就是左侧数据集和右侧数据集,联合主键相等,也就是左侧和右侧,同时出现的主键的数据行保留,最后生成新数据集。

总结

以上4种连接方式,是数据连接中的主要连接方式,也是merge函数中的主要连接方法。在实际数据分析和处理过程中,左连接和右连接运用场景更多一些,希望大家对照图示,参照代码,灵活熟练掌握这4种常用的数据连接方法。

相关推荐

usb驱动程序在哪里(usb驱动叫什么名字)
usb驱动程序在哪里(usb驱动叫什么名字)

U盘添加驱动号或路径的方法如下在我的电脑上按右键,在快捷菜单里,选择“管理”,打开“计算机管理”窗口。在计算机管理窗口里,选择“存储”下面的“磁盘管理”,如果看得到没有盘符的U盘,那么在这个U盘上按鼠标右键,选择“更改驱动器名称和路径”选项...

2026-01-11 05:05 liuian

windows 10专业版怎么激活(windows十专业版怎么激活)
  • windows 10专业版怎么激活(windows十专业版怎么激活)
  • windows 10专业版怎么激活(windows十专业版怎么激活)
  • windows 10专业版怎么激活(windows十专业版怎么激活)
  • windows 10专业版怎么激活(windows十专业版怎么激活)
美德少年事迹材料(美德少年事迹材料500字左右)

就写平时做了什么好事就可以了。他们分别是许昌市文化街小学六(1)班学生谭天、许昌市第一中学七(12)班学生安家宝。现年12岁的谭天是一个阳光男孩儿,他性格活泼,热情开朗,富有爱心,品学兼优,有较强的集...

手机改无线路由器密码(手机改路由器密码怎么改教程)
  • 手机改无线路由器密码(手机改路由器密码怎么改教程)
  • 手机改无线路由器密码(手机改路由器密码怎么改教程)
  • 手机改无线路由器密码(手机改路由器密码怎么改教程)
  • 手机改无线路由器密码(手机改路由器密码怎么改教程)
win7万能网卡驱动离线版安装包

要使用Win7网卡驱动离线包,首先将离线包下载到计算机上。然后,打开设备管理器,找到你的网卡设备。右键点击该设备,选择“更新驱动程序软件”。在弹出的对话框中,选择“浏览计算机以查找驱动程序软件”。然后...

音频驱动器怎么安装(音频驱动程序怎么安装)
音频驱动器怎么安装(音频驱动程序怎么安装)

1、在浏览器中输入并搜索,然后下载并安装。2、安装完成后打开360驱动大师,它就会自动检测你的电脑需要安装或升级的驱动。3、检测完毕后,我们可以看到我们的声卡驱动需要安装或升级,点击安装或升级,就会开始自动安装或升级声卡了。4、升级过程中会...

2026-01-11 02:55 liuian

硬盘分区win10(硬盘分区win7)
  • 硬盘分区win10(硬盘分区win7)
  • 硬盘分区win10(硬盘分区win7)
  • 硬盘分区win10(硬盘分区win7)
  • 硬盘分区win10(硬盘分区win7)
win11要不要升级

答案是:不必强更,稍安勿躁。  没错,Windows11系统的确是微软的最新力作,其中安卓APP可以在桌面系统中直接使用的“噱头”也极有吸引力,但是,按照win10更新后bug层出不穷的情况来看,正...

windows7联想旗舰版(联想win7旗舰版配置)

你好!联想Windows7旗舰版并不是一个显示设备,而是一个操作系统。因此,无法用英寸来描述其大小。旗舰版是指Windows7操作系统的最高版本,具有更多的功能和特性与其他版本不同。Windows...

手机刷win10(手机刷win10系统)

要给普通的手机刷win10,首先需要确保手机型号支持win10系统,并且进行备份重要数据。然后下载win10系统文件并通过USB连接手机与电脑,使用刷机工具将系统文件刷入手机中。在此过程中需要注意手机...

万能网卡驱动离线版xp(万能网卡驱动xp电脑版离线)

使用网卡版的驱动精灵或者驱动人生,安装后即可驱动无线网卡。安装网卡驱动是连接网络的关键步骤,即使在没有网络连接的情况下,也可以通过以下步骤来安装网卡驱动:1.下载网卡驱动程序:首先,你需要知道你的网...

手机五笔输入法哪个软件最好用

百度输入法。百度手机输入法是由百度(中国)有限公司推出的一款安装于手机和平板中的人工智能输入法工具,旨在帮助用户快速、精准的完成多内容输入,使用百度手机输入法,更懂用户的表达。百度手机输入法支持拼音、...

电脑公司社会实践内容(电脑店社会实践)

办公室社会实践有以下几方面内容:1、环保类:“植树”“清扫公共设施”“社区宣传”等。2、科普类“参观学习科研机构”“动手小发明”等。3、爱心类“帮扶老人”“义捐灾区”“募集贫困儿童”等。4、成长类“义...

windows7旗舰版怎么升级到windows10

Windows7旗舰版32位,可以用U盘升级为windows10吗?这个是肯定可以的呀。Windows7升级为windows10,这是一定是可以的。关键一点。你会用U盘升级系统才可以的呀。如果你不...

华为服务器安装系统教程(华为服务器安装步骤)

1.准备安装环境:检查服务器的电源、网络连接及其他配件是否正常。2.安装软件:将光盘或U盘中的安装文件拷贝到服务器上,然后执行安装命令。3.配置服务器:根据业务需要对服务器进行IP地址、DNS、...