百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Python2大类方法筛选excel特定的值以及范围

liuian 2024-12-20 17:18 38 浏览

1.前言

查询筛选是数据分析常用的功能,我们在做数据挖掘时往往需要先进行数据预处理,然后就可以按各种条件以及相关的组合筛选中所需数据, 我们主要从以下方面来分析查询和筛选常用的操作。①在中括号里设定筛选条件筛选特定的行;②使用isin方法筛选特定的值 ;③loc和iloc以后分享。

完整代码如下所示。

  # 2种小方法使用Python进行excel数据筛选
  import pandas as pd
  dataFrame = pd.read_csv('./商品需求训练集.csv')
  dataFrame.head()
  # 1. 在中括号里设定筛选条件筛选特定范围
  # 1.1筛选label列中大于0的数据
  a = dataFrame[dataFrame['label'] > 0]
  a
  # 1.2多个筛选条件,用"&"或"|"连接起来。注意用小括号将筛选条件括起来
  b = dataFrame[(dataFrame['label'] > 0) & (dataFrame['is_sale_day']==1)]
  # 1.3筛选label列中在(0, 10]范围之内并且is_sale_day等于1的数据。
  c = dataFrame[(dataFrame['label'] > 0) & (dataFrame['label'] <= 10) & (dataFrame['is_sale_day']==1)]
  # 1.4 更改label范围为(0,100]查询结果如下:
  c = dataFrame[(dataFrame['label'] > 0) & (dataFrame['label'] <= 100) & (dataFrame['is_sale_day']==1)]
  c# 
  # 1.5 筛选出大于label变量平均值的数据,并降序处理
  d = dataFrame[dataFrame['label'] > dataFrame['label'].mean()].sort_values(by='label', ascending=False)
  d.head()
  # 2. 使用isin方法进行筛选
  # 我们需要锁定筛选某些具体的值的,这时候就需要isin了。
  # 比如我们要限定label取值只能为274.0, 115.0, 118.0时。
  # 此时可将其作为列表传入到isin方法中
  # 2.1 筛选单个的值
  lst = [274.0]
  e1 = dataFrame[dataFrame.label.isin(lst )]
  e2 = dataFrame[dataFrame['label'].isin(lst)]
  e1, e2
  # 2.2 同时筛选多个的值
  lst2 = [274.0, 115.0, 118.0]
  g = dataFrame[dataFrame["label"].isin(lst2)]
  g

2.步骤

1.在中括号里设定筛选条件过滤行

1.1 在中括号中输入单个筛选条件

我们以某个比赛中的训练集的数据为例,数据的基本信息如下所示。

比如说,我们想要筛选label列中大于0的数据,具体代码如下所示。

  
  a = dataFrame[dataFrame['label'] > 0]
  a

运行结果如下所示。

1.2 在中括号中输入多个筛选条件(2个)

如果说有多个筛选条件,可以用“&”(表示“且”)或“|”(表示“或”)连接起来。就比如说,筛选label列中大于0和is_sale_day等于1的数据,注意要用小括号将并列的筛选条件括起来。否则可能出错,或者查找不到正确的数据。具体代码如下所示。

  
  b = dataFrame[(dataFrame['label'] > 0) & (dataFrame['is_sale_day']==1)]
  b

具体运行结果如下所示。可以看出筛选出来的结果同时满足label大于0和is_sale_day等于1的条件。

1.3 在中括号中三个筛选条件

比如说筛选在label在某一范围内的数据,设定上限和下限需要用到两个条件,然后根据自己的情况可以再增加一些条件。如筛选label范围为(0,100]并且is_sale_day的值等于1的情况, 具体代码如下所示。

  
  c = dataFrame[(dataFrame['label'] > 0) 
  & (dataFrame['label'] <= 10) 
  & (dataFrame['is_sale_day']==1)]
  c

如下所示,查询无结果。可知在该条件下没有符合要求的项。


尝试更改label范围为(0,100]查询结果如下:

1.4 筛选出大于label变量平均值的数据,并升序处理

如下所示,其中默认为升序排序,我们可以设置参数ascending=False将其变为降序排序。

  
  d = dataFrame[dataFrame['label'] > dataFrame['label'].mean()].sort_values(by='label', ascending=False)
  d.head()

具体结果如下所示。


2.使用isin方法进行筛选

在之前,我们筛选条件基本上都是给出范围,但实际上很多时候我们需要锁定筛选某些具体的值,这时候isin方法就可以派上用场了。

比如我们要限定label取值只能为274.0, 115.0, 118.0时。此时可将其作为列表传入到isin方法中,具体代码如下所示。

2.1筛选单个的值

  
  lst = [274.0]
  e1 = dataFrame[dataFrame.label.isin(lst)]
  e2 = dataFrame[dataFrame['label'].isin(lst)]
  e1, e2

如上所示,将需要查询的值以列表的方式进行传入,然后获取数据中的待查询列(如上第二行和第三行代码所示,有两种方法可以获取列),最后调用isin()方法。

类似地,当我们想要同时查询多个值时,只需要更改列表中的值即可。

2.2 同时筛选多个的值

我们需要将label列中值为274.0, 115.0, 118.0 的所在行全部筛选出来,具体代码如下所示。

  
  lst2 = [274.0, 115.0, 118.0]
  g = dataFrame[dataFrame["label"].isin(lst2)]
  g

如上所示,具体的运行结果如下所示。

相关推荐

快速上手maven

Maven的作用在开发过程中需要用到各种各样的jar包,查找和下载这些jar包是件费时费力的事,特别是英文官方网站,可以将Maven看成一个整合了所有开源jar包的合集,我们需要jar包只需要从Mav...

Windows系统——配置java环境变量

怎么配置java环境变量呢?首先是安装好jdk然后我的电脑右键选择属性然后选择左侧高级系统设置高级然后点环境变量然后在用户变量或系统变量中配置,用户变量指的是只有当前用户可用,系统变量指的是系统中...

ollama本地部署更改默认C盘,Windows配置环境变量方法

ollama是一个大语言模型(LLM——LargeLanguageModel),本地电脑安装网上也要很多教程,看上去非常简单,一直下一步,然后直接就可以使用了。但是我在实操的时候并不是这样,安装完...

# Windows 环境变量 Path 显示样式更改

#怎样学习Java##Windows环境变量Path显示样式更改##1、传统Path环境变量显示:```---》键盘上按【WIN+I】打开系统【设置】---》依次点击---》【系统...

如何在Windows中创建用户和系统环境变量

在Windows中创建环境变量之前您应该了解的事情在按照本指南中所示的任何步骤创建指向文件夹、文件或其他任何内容的用户和系统变量之前,您应该了解两件事。第一个也是最重要的一个是了解什么是环境变量。...

Windows 中的环境变量是什么?

Windows中的环境变量是什么?那么,Windows中的环境变量是什么?简而言之,环境变量是描述应用程序和程序运行环境的变量。所有类型的程序都使用环境变量来回答以下问题:我安装的计算机的名称是什么...

【Python程序开发系列】谈一谈Windows环境变量:系统和用户变量

这是我的第350篇原创文章。一、引言环境变量(environmentvariables)一般是指在操作系统中用来指定操作系统运行环境的一些参数,如:临时文件夹位置和系统文件夹位置等。环境变量是在操作...

系统小技巧:还原Windows10路径环境变量

有时,我们在Windows10的“运行”窗口中执行一些命令或运行一些程序,这时即便没有指定程序的具体路径,只输入程序的名称(如notepad.exe),便可以迅速调用成功。这是因为Windows默认...

Windows10系统的“环境变量”在哪里呢?

当我们在操作系统是Windows10的电脑里安装了一些软件,要通过配置环境变量才能使用软件时,在哪里能找到“环境变量”窗口呢?可以按照下面的步骤找到“环境变量”。说明:下面的步骤和截图是在Window...

系统小技巧:彻底弄懂Windows 10环境变量

每当我们进行系统清理时,清理软件总能自动找到Windows的临时文件夹之所在,然后加以清理,即便是我们重定向了TEMP目录也是如此。究其原因,是因为清理软件会根据TEMP环境变量来判断现有临时文件夹的...

MySQL 5.7 新特性大全和未来展望

本文转自微信公众号:高可用架构作者:杨尚刚引用美图公司数据库高级DBA,负责美图后端数据存储平台建设和架构设计。前新浪高级数据库工程师,负责新浪微博核心数据库架构改造优化,以及数据库相关的服务器存...

MySQL系列-源码编译安装(v8.0.25)

一、前言生产环境建议使用二进制安装法,其优点是部署简单、快速、方便,并且相对"yum/rpm安装"方法能更方便地自定义文件存放的目录结构,方便用脚本批量部署,方便日后运维管理。在生产...

MySQL如何实时同步数据到ES?试试这款阿里开源的神器!

前几天在网上冲浪的时候发现了一个比较成熟的开源中间件——Canal。在了解了它的工作原理和使用场景后,顿时产生了浓厚的兴趣。今天,就让我们跟随我的脚步,一起来揭开它神秘的面纱吧。简介canal翻译为...

技术老兵十年专攻MySQL:编写了763页核心总结,90%MySQL问题全解

MySQL是开放源码的关系数据库管理系统,由于性能高、成本低、可靠性好,成为现在最流行的开源数据库。MySQL学习指南笔记领取方式:关注、转发后私信小编【111】即可免费获得《MySQL进阶笔记》的...

Mysql和Hive之间通过Sqoop进行数据同步

文章回顾理论大数据框架原理简介大数据发展历程及技术选型实践搭建大数据运行环境之一搭建大数据运行环境之二本地MAC环境配置CPU数和内存大小查看CPU数sysctl machdep.cpu...