百度360必应搜狗淘宝本站头条
python判断字典是否为空crontab每周一执行aes和des区别安装指定版本npmadb pull
当前位置：网站首页 > IT知识 > 正文

关于python数据库pandas的一些常用操作。

liuian 2025-04-09 17:49 11 浏览

熟悉python的都知道，pandas为python提供了高效的数据治理方法，个人感觉类似python版本的sql，下面我们一起来了解一些pandas的常用操作。

首先我们要知道pandas内部的两种数据类型，Series和DataFrame。

  1. Series本质就是python的列表
  2. DataFrame是二维的数组结构，既有x轴，也有y轴。

下面开始介绍：

  • 读取文件/操作数据库
import pandas as pd
import numpy as np 
from sqlalchemy import create_engine
#1.pandas的读取文件操作
#连接mysql，读取数据
engine = create_engine('mysql+pymysql://root:root123@localhost/test')sql = 'select * from job51'
df1 = pd.read_sql(sql=sql,con=engine)
print(df1.head(5))

#读取excel\csv等等

其内置的读取方法已经满足我们的很多需要。

创建一个DataFrame非常easy，下面看代码

dates = pd.date_range('20190301',periods=8)
#periods代表日期的总个数

df = pd.DataFrame(np.random.randn(8,5),index=dates,columns=list('ABCDE'))

#我们以设置的日期作为DataFrame的索引列，其中list('ABCDE')就是把str转换为list类型
print(df)
#也就是说我们应该产生出一个6列 8行的表格

如上面所示，看下输出的结果。

我们一般用df.head()取前面几行，看一下head的源码部分。如下图。

其默认了n=5，也就是，df.head()显示的就是5行，当然这里可以任意更改。既然有head()那肯定就有tail()方法，原理一样不过是从后面截取/ df.tail（）。

下面我们来打印一下他的索引列，其实就是我们创建的时间序列使用。

print(df.index)

输出结果，是个series，也就是列表类型。

再来看一下他的整个二维数组的值使用如下方法。

print(df.index)

结果如下。以每一行为一个列表的形式展现，访问组内元素和访问嵌套列表一样

list[index][index]

有的时候我们希望列表可以横纵交换，使用如下方法。

print(df.T)#转置

结果如图。

再来看看他的排序方法

print(df.sort_values('C'))#指定列排序，也就是按照C列排序

文章过长，暂时先分享到这里。有兴趣一起探讨。

相关推荐

深入解析 MySQL 8.0 JSON 相关函数:解锁数据存储的无限可能

引言在现代应用程序中，数据的存储和处理变得愈发复杂多样。MySQL8.0引入了丰富的JSON相关函数，为我们提供了更灵活的数据存储和检索方式。本文将深入探讨MySQL8.0中的JSON...

MySQL的Json类型个人用法详解（mysql json类型对应java什么类型）

前言虽然MySQL很早就添加了Json类型，但是在业务开发过程中还是很少设计带这种类型的表。少不代表没有，当真正要对Json类型进行特定查询，修改，插入和优化等操作时，却感觉一下子想不起那些函数怎么使...

MySQL的json查询之json_array（mysql json_search）

json_array顾名思义就是创建一个数组，实际的用法，我目前没有想到很好的使用场景。使用官方的例子说明一下吧。例一selectjson_array(1,2,3,4);json_array虽然单独...

头条创作挑战赛#一、LSTM 原理 长短期记忆网络

#头条创作挑战赛#一、LSTM原理长短期记忆网络（LongShort-TermMemory，LSTM）是一种特殊类型的循环神经网络（RNN），旨在解决传统RNN在处理长序列数据时面临的梯度...

TensorBoard最全使用教程:看这篇就够了

机器学习通常涉及在训练期间可视化和度量模型的性能。有许多工具可用于此任务。在本文中，我们将重点介绍TensorFlow的开源工具套件，称为TensorBoard，虽然他是TensorFlow...

图神经网络版本的Kolmogorov Arnold(KAN)代码实现和效果对比

本文约4600字，建议阅读10分钟本文介绍了图神经网络版本的对比。KolmogorovArnoldNetworks(KAN)最近作为MLP的替代而流行起来，KANs使用Kolmogorov-Ar...

kornia，一个实用的 Python 库!（python kkb_tools）

大家好，今天为大家分享一个实用的Python库-kornia。Github地址：https://github.com/kornia/kornia/Kornia是一个基于PyTorch的开源计算...

图像分割掩码标注转YOLO多边形标注

Ultralytics团队付出了巨大的努力，使创建自定义YOLO模型变得非常容易。但是，处理大型数据集仍然很痛苦。训练yolo分割模型需要数据集具有其特定格式，这可能与你从大型数据集中获得的...

[python] 向量检索库Faiss使用指北

Faiss是一个由facebook开发以用于高效相似性搜索和密集向量聚类的库。它能够在任意大小的向量集中进行搜索。它还包含用于评估和参数调整的支持代码。Faiss是用C++编写的，带有Python的完...

如何把未量化的 70B 大模型加载到笔记本电脑上运行?

并行运行70B大模型我们已经看到，量化已经成为在低端GPU（比如Colab、Kaggle等）上加载大型语言模型（LLMs）的最常见方法了，但这会降低准确性并增加幻觉现象。那如果你和你的朋友们...

ncnn+PPYOLOv2首次结合!全网最详细代码解读来了

编辑：好困LRS【新智元导读】今天给大家安利一个宝藏仓库miemiedetection，该仓库集合了PPYOLO、PPYOLOv2、PPYOLOE三个算法pytorch实现三合一，其中的PPYOL...

人工智能——图像识别（人工智能图像识别流程）

概述图像识别（ImageRecognition）是计算机视觉的核心任务之一，旨在通过算法让计算机理解图像内容，包括分类（识别物体类别）、检测（定位并识别多个物体）、分割（像素级识别）等，常见的应用场...

PyTorch 深度学习实战(15):Twin Delayed DDPG (TD3) 算法

在上一篇文章中，我们介绍了DeepDeterministicPolicyGradient(DDPG)算法，并使用它解决了Pendulum问题。本文将深入探讨TwinDelayed...

大模型中常用的注意力机制GQA详解以及Pytorch代码实现

分组查询注意力(GroupedQueryAttention)是一种在大型语言模型中的多查询注意力(MQA)和多头注意力(MHA)之间进行插值的方法，它的目标是在保持MQA速度的同时...

pytorch如何快速创建具有特殊意思的tensor张量?

专栏推荐正文我们通过值可以看到torch.empty并没有进行初始化创建tensor并进行随机初始化操作，常用rand/rand_like,randint正态分布（0，1）指定正态分布的均值还有方差i...

一周热门
最近发表
标签列表