百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Python Pandas数据分析 - Day 1 - 基本结构

liuian 2025-09-06 06:26 3 浏览

前言

今天是跟着@外星人玩Python学习Pandas的第一天,拜读了Chapter01、02,这两节课程主要讲解Pands的基本结构,如下图所示,主要有:

  1. DataFrame
  2. Series
  3. Index,MultiIndex

Chapter01 - 原始数据

代码实现

Chapter01的代码实现:

# -*- coding: utf-8 -*-
"""
Spyder Editor

@外星人学Python Chapter01
"""

# 修改本地文件路径
import os

os.chdir("E:/2018-VGIC/21_SuccessFactor/Python Training/pandas专栏数据与源码/文章源码/文章源码/src/01/src")

#%%
import pandas as pd

# 读取数据
df = pd.read_csv('data.csv')

# df = pd.read_csv('data.csv', header=0, index_col=(0))

# 打印数据,数据量大的时候不建议使用
df
# =============================================================================
# Out[5]: 
#    名称    单价  数量
# 0  苹果  10.5   2
# 1  雪梨   6.0   5
# 2  西瓜   8.0  10
# =============================================================================

df.values
# =============================================================================
# Out[6]: 
# array([['苹果', 10.5, 2],
#        ['雪梨', 6.0, 5],
#        ['西瓜', 8.0, 10]], dtype=object)
# =============================================================================

#%%

# Series, 系列
# 通过DataFrame['列名 ']访问

df['名称']
# =============================================================================
# Out[9]: 
# 0    苹果
# 1    雪梨
# 2    西瓜
# Name: 名称, dtype: object
# =============================================================================

# Index,通过索引访问某一行的数据
df.loc[1, :]
# =============================================================================
# Out[10]: 
# 名称     雪梨
# 单价    6.0
# 数量      5
# Name: 1, dtype: object
# =============================================================================


# loc[行索引, 列索引],通过行列索引访问某一具体单元格的数据
df.loc[1, '名称']
# Out[12]: '雪梨'

df.loc[2, '单价']

#%%

# 通过DataFrame的set_index方法设置索引,指定列索引

df = df.set_index('名称')

df
# =============================================================================
# Out[23]: 
#       单价  数量
# 名称          
# 苹果  10.5   2
# 雪梨   6.0   5
# 西瓜   8.0  10
# =============================================================================

df.loc['西瓜', :]
# =============================================================================
# Out[24]: 
# 单价     8.0
# 数量    10.0
# Name: 西瓜, dtype: float64
# =============================================================================
#%%

Chapter02的代码实现:

# -*- coding: utf-8 -*-
"""
Created on Sat Dec 25 22:09:10 2021

@author: txdmxcg

@外星人学Python Chapter02

"""

import os

os.chdir("E:/2018-VGIC/21_SuccessFactor/Python Training/pandas专栏数据与源码/文章源码/文章源码/src/02/src")

#%%

import pandas as pd

df = pd.read_excel('data/天气.xlsx', sheet_name='Sheet1')

# 设置星期列为行索引
df = df.set_index('星期')
df
# =============================================================================
# Out[18]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期一  工作日  12.79   13   3
# 星期二  工作日  19.67   28  96
# 星期三  工作日  17.51   16  20
# 星期四  工作日  14.44   11  22
# 星期五  工作日  10.51   26  79
# 星期六   周末  11.07   27  62
# 星期日   周末  17.50   20   1
# =============================================================================

#%%
# 通过行索引标签获取数据

# 获取每天的气温(切片方法)
df.loc[:, '气温']
# =============================================================================
# Out[15]: 
# 星期
# 星期一    12.79
# 星期二    19.67
# 星期三    17.51
# 星期四    14.44
# 星期五    10.51
# 星期六    11.07
# 星期日    17.50
# Name: 气温, dtype: float64
# =============================================================================

# 获取某一天的气温
df.loc['星期一','气温']
# Out[16]: 12.79

# 获取多行气温
df.loc[['星期一','星期四'],'气温']
# =============================================================================
# Out[17]: 
# 星期
# 星期一    12.79
# 星期四    14.44
# Name: 气温, dtype: float64
# =============================================================================

# selected = ['星期一','星期四'],通过列表值进行访问
# df.loc[selected,'气温']

# 也可以通过列标签传入列表,访问多列数据
# cols = ['气温','湿度']

df.loc[ ['星期一','星期四'] , ['气温','湿度']]
# =============================================================================
# Out[19]: 
#         气温  湿度
# 星期            
# 星期一  12.79   3
# 星期四  14.44  22
# =============================================================================

# 切片,通过“:”访问部分数据,“:”需要放在索引标签
# 如,获取周一,周四的所有数据
df.loc[ ['星期一','星期四'] , :]
# =============================================================================
# Out[20]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期一  工作日  12.79   13   3
# 星期四  工作日  14.44   11  22
# =============================================================================

# 如,获取每天的紫外线数据
df.loc[:, '紫外线']
# =============================================================================
# Out[21]: 
# 星期
# 星期一    13
# 星期二    28
# 星期三    16
# 星期四    11
# 星期五    26
# 星期六    27
# 星期日    20
# Name: 紫外线, dtype: int64
# =============================================================================

# 切片的区间段操作,"起点":"终点",表示从起点数据一直取到终点数据
# 这里没有引用作者原文中的"左":"右",因为从DataFrame的结构来讲,数据不仅有列(Series)的数据,也有行 Row的数据;
# 如,我们想取从星期二到星期五之间,气温到紫外线的数据

df.loc['星期二':'星期五' , '气温':'紫外线' ]
# =============================================================================
# Out[23]: 
#         气温  紫外线
# 星期             
# 星期二  19.67   28
# 星期三  17.51   16
# 星期四  14.44   11
# 星期五  10.51   26
# =============================================================================

# 或者每天的气温到紫外线的数据
df.loc[:, '气温':'紫外线']
# =============================================================================
# Out[24]: 
#         气温  紫外线
# 星期             
# 星期一  12.79   13
# 星期二  19.67   28
# 星期三  17.51   16
# 星期四  14.44   11
# 星期五  10.51   26
# 星期六  11.07   27
# 星期日  17.50   20
# =============================================================================

#%%
# 通过位置索引获取数据 df.iloc, 位置索引从0开始

df
# =============================================================================
# Out[27]: 
#       0        1       2       3
#      日类型     气温  紫外线  湿度
# 星期                      
# 0 星期一  工作日  12.79   13   3
# 1 星期二  工作日  19.67   28  96
# 2 星期三  工作日  17.51   16  20
# 3 星期四  工作日  14.44   11  22
# 4 星期五  工作日  10.51   26  79
# 5 星期六   周末  11.07   27  62
# 6 星期日   周末  17.50   20   1
# 7 星期日   周末  17.50   20   1
# =============================================================================

df.iloc[1,2]
# Out[25]: 28

# 位置索引的切片规则,不包括右区间

df.iloc[1:5, :]

# =============================================================================
# Out[26]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期二  工作日  19.67   28  96
# 星期三  工作日  17.51   16  20
# 星期四  工作日  14.44   11  22
# 星期五  工作日  10.51   26  79
# =============================================================================

#%%
# 通过位置参数获取部分切片
first = df.iloc[:5, :]
second = df.iloc[5:, :]

first
# =============================================================================
# Out[31]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期一  工作日  12.79   13   3
# 星期二  工作日  19.67   28  96
# 星期三  工作日  17.51   16  20
# 星期四  工作日  14.44   11  22
# 星期五  工作日  10.51   26  79
# =============================================================================

second
# =============================================================================
# Out[32]: 
#     日类型     气温  紫外线  湿度
# 星期                     
# 星期六  周末  11.07   27  62
# 星期日  周末  17.50   20   1
# =============================================================================

#%%
# 高级切片应用,切片的第三个参数表示step,即取数的间隔
df.iloc[0:5:2, :]
# =============================================================================
# Out[33]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期一  工作日  12.79   13   3
# 星期三  工作日  17.51   16  20
# 星期五  工作日  10.51   26  79
# =============================================================================

# 通过slice方法自定义切片
rows = slice(0,5,2)

df.iloc[rows, :]
# =============================================================================
# Out[36]: 
#      日类型     气温  紫外线  湿度
# 星期                      
# 星期一  工作日  12.79   13   3
# 星期三  工作日  17.51   16  20
# 星期五  工作日  10.51   26  79
# =============================================================================


总结

因为自己也在同步读大神Wes McKinney的《Python for Data Anlysis》2ndEdition,目前也刚好看到了第五章“Getting Started with Pands”,感觉有必要补充一些具体案例增强应用Pandas进行数据分析的理解,因此跟着外星人一起学Python,他的系列实用性较强,比较推荐。

代码编写方面,同样推荐直接下载安装Anaconda的应用程序,包含了Numpy,Pandas,Matplotlab的很多包,省时省力。

相关推荐

PHPMAILER实现PHP发邮件功能php实例

这篇文章主要为大家详细介绍了PHPMAILER实现PHP发邮件功能,具有一定的参考价值,感兴趣的小伙伴们可以参考一下本文实例为大家分享了PHPMAILER实现PHP发邮件功能的具体代码,供大家参考,具...

Cacti监控服务器配置教程(基于CentOS+Nginx+MySQL+PHP环境搭建)

具体案例:局域网内有两台主机,一台Linux、一台Windows,现在需要配置一台Cacti监控服务器对这两台主机进行监控环境说明:1、Linux主机操作系统:CentOS6.2IP地址:192.1...

如何在webmin中配置多个PHP版本_怎么配置php

请关注本头条号,每天坚持更新原创干货技术文章。如需学习视频,请在微信搜索公众号“智传网优”直接开始自助视频学习1.前言如何在webmin中配置多个PHP版本?本教程将会给您一些启示和操作案例。Web...

详解Drupal安装步骤_drools安装

DrupalDrupal是一个基于PHP语言编写的开源的内容管理系统(CMS:ContentManagementSystem),和Wordpress等CMS一样提供主题。在这里详细介绍一下安装Dr...

nternet 信息服务(IIS) 升级为IIS 6.0

 WindowsServer2003中Internet信息服务(IIS)升级为IIS6.0,其安全性更高。默认情况下,WindowsServer2003没有安装IIS6.0,要通过...

Php JIT 使用详解_php的!

简介PHP8引入的JIT(Just-In-Time编译器)是该版本的一个重要性能特性,首次让PHP有了运行时即时编译的能力,从解释型语言迈向了“编译执行”的方向。什么是JIT?JIT...

php 常见配置详解_php cgi配置

以下是PHP常见的配置项及其含义:error_reporting:设置错误报告级别,可以控制PHP显示哪些错误。例如,设置为E_ALL将显示所有错误,而设置为0将禁止显示任何错误。displa...

技巧:PHP版本怎样隐藏在Linux服务器

通常情况下,大多数安装web服务器软件的默认设置存在信息泄露,这些软件其中之一就是PHP。PHP是如今最流行的服务端html嵌入式语言之一。而在如今这个充满挑战的时代,有许多黑客会尝试发现你服务端的漏...

PHP八大安全函数解析_php安全设置

在现代互联网中,我们经常要从世界各地的用户中获得输入数据。但是,我们都知道“永远不能相信那些用户输入的数据”。所以在各种的Web开发语言中,都会提供保证用户输入数据安全的函数。在PHP中,有些非常有...

win7下apache+mysql+php安装配置_win7 mysql安装配置教程

一.首先下载好要用的apache版本:http://httpd.apache.org/download.cgimysql版本:http://dev.mysql.com/downloads/mys...

phpmyadmin取消最大文件限制的更改解决方法

用phpmyadmin导入大数据库的时候出现:Nodatawasreceivedtoimport.Eithernofilenamewassubmitted,orthefi...

成功安装 Magento2.4.3最新版教程「技术干货」

外贸独立站设计公司xingbell.com经过多次的反复实验,最新版的magento2.4.3在oneinstack的环境下的详细安装教程如下:一.vps系统:LinuxCentOS7.7.19...

CentOS、Nginx、PHP、MySQL的安装和配置记录

安装LNMP安装wget工具(可选) yuminstall-ywget下载Nginx wgethttp://www.atomicorp.com/installers/ato...

PHP扩展开发之路(二)_php扩展直接执行php代码

昨日,Jamlee发布了PHP扩展开发之路(一),今日再来续集,哈哈,会不会更有趣呢!不说多的,直接来!##0x2helloworld!,你的第一个php扩展##阅读前必看小贴士:如果你不想在本...

比较常见类型漏洞讲解(一)_常见漏洞的特点及危害

这里介绍一些手动挖掘漏洞时比较容易找到的漏洞,根据不同类型的漏洞来介绍。演示准备目标主机:Metasploitable2攻击目标:目标主机的dvwa系统攻击机:KaliSessionId盗用不知道你们...