: | : | :期货程序化 | :期货程序化研究 | :期货量化学习 | :期货量化 |
返回列表 发帖

【Pandas 教程系列】- Pandas 数据结构 - DataFrame

【Pandas 教程系列】- Pandas 数据结构 - DataFrame

DataFrame 是一个表格型的数据结构,它含有一组有序的列,每列可以是不同的值类型(数值、字符串、布尔型值)。DataFrame 既有行索引也有列索引,它可以被看做由 Series 组成的字典(共同用一个索引)。

DataFrame 特点:

列和行: DataFrame 由多个列组成,每一列都有一个名称,可以看作是一个 Series。同时,DataFrame 有一个行索引,用于标识每一行。

二维结构: DataFrame 是一个二维表格,具有行和列。可以将其视为多个 Series 对象组成的字典。

列的数据类型: 不同的列可以包含不同的数据类型,例如整数、浮点数、字符串等。



DataFrame 构造方法如下:
  1. pandas.DataFrame( data, index, columns, dtype, copy)
复制代码
参数说明:

data:一组数据(ndarray、series, map, lists, dict 等类型)。

index:索引值,或者可以称为行标签。

columns:列标签,默认为 RangeIndex (0, 1, 2, …, n) 。

dtype:数据类型。

copy:拷贝数据,默认为 False。

Pandas DataFrame 是一个二维的数组结构,类似二维数组。

实例 - 使用列表创建
  1. import pandas as pd

  2. data = [['Google', 10], ['Runoob', 12], ['Wiki', 13]]

  3. # 创建DataFrame
  4. df = pd.DataFrame(data, columns=['Site', 'Age'])

  5. # 使用astype方法设置每列的数据类型
  6. df['Site'] = df['Site'].astype(str)
  7. df['Age'] = df['Age'].astype(float)

  8. print(df)
复制代码
也可以使用字典来创建:

实例 - 使用字典创建
  1. import pandas as pd

  2. data = {'Site':['Google', 'Runoob', 'Wiki'], 'Age':[10, 12, 13]}

  3. df = pd.DataFrame(data)

  4. print (df)
复制代码
输出结果如下:



以下实例使用 ndarrays 创建,ndarray 的长度必须相同, 如果传递了 index,则索引的长度应等于数组的长度。如果没有传递索引,则默认情况下,索引将是range(n),其中n是数组长度。

ndarrays 可以参考:NumPy Ndarray 对象

实例 - 使用 ndarrays 创建
  1. import numpy as np
  2. import pandas as pd

  3. # 创建一个包含网站和年龄的二维ndarray
  4. ndarray_data = np.array([
  5.     ['Google', 10],
  6.     ['Runoob', 12],
  7.     ['Wiki', 13]
  8. ])

  9. # 使用DataFrame构造函数创建数据帧
  10. df = pd.DataFrame(ndarray_data, columns=['Site', 'Age'])

  11. # 打印数据帧
  12. print(df)
复制代码
输出结果如下:



从以上输出结果可以知道, DataFrame 数据类型一个表格,包含 rows(行) 和 columns(列):



还可以使用字典(key/value),其中字典的 key 为列名:

实例 - 使用字典创建
  1. import pandas as pd

  2. data = [{'a': 1, 'b': 2},{'a': 5, 'b': 10, 'c': 20}]

  3. df = pd.DataFrame(data)

  4. print (df)
复制代码
输出结果为:



没有对应的部分数据为 NaN。

Pandas 可以使用 loc 属性返回指定行的数据,如果没有设置索引,第一行索引为 0,第二行索引为 1,以此类推:

实例
  1. import pandas as pd

  2. data = {
  3.   "calories": [420, 380, 390],
  4.   "duration": [50, 40, 45]
  5. }

  6. # 数据载入到 DataFrame 对象
  7. df = pd.DataFrame(data)

  8. # 返回第一行
  9. print(df.loc[0])
  10. # 返回第二行
  11. print(df.loc[1])
复制代码
输出结果如下:
  1. calories    420
  2. duration     50
  3. Name: 0, dtype: int64
  4. calories    380
  5. duration     40
  6. Name: 1, dtype: int64
复制代码
注意:返回结果其实就是一个 Pandas Series 数据。

也可以返回多行数据,使用 [[ ... ]] 格式,... 为各行的索引,以逗号隔开:

实例
  1. import pandas as pd

  2. data = {
  3.   "calories": [420, 380, 390],
  4.   "duration": [50, 40, 45]
  5. }

  6. # 数据载入到 DataFrame 对象
  7. df = pd.DataFrame(data)

  8. # 返回第一行和第二行
  9. print(df.loc[[0, 1]])
复制代码
输出结果为:
  1.    calories  duration
  2. 0       420        50
  3. 1       380        40
复制代码
注意:返回结果其实就是一个 Pandas DataFrame 数据。

我们可以指定索引值,如下实例:

实例
  1. import pandas as pd

  2. data = {
  3.   "calories": [420, 380, 390],
  4.   "duration": [50, 40, 45]
  5. }

  6. df = pd.DataFrame(data, index = ["day1", "day2", "day3"])

  7. print(df)
复制代码
输出结果为:
  1.       calories  duration
  2. day1       420        50
  3. day2       380        40
  4. day3       390        45
复制代码
Pandas 可以使用 loc 属性返回指定索引对应到某一行:

实例
  1. import pandas as pd

  2. data = {
  3.   "calories": [420, 380, 390],
  4.   "duration": [50, 40, 45]
  5. }

  6. df = pd.DataFrame(data, index = ["day1", "day2", "day3"])

  7. # 指定索引
  8. print(df.loc["day2"])
复制代码
输出结果为:
  1. calories    380
  2. duration     40
  3. Name: day2, dtype: int64
复制代码
更多 DataFrame 说明
基本操作:
  1. # 获取列
  2. name_column = df['Name']

  3. # 获取行
  4. first_row = df.loc[0]

  5. # 选择多列
  6. subset = df[['Name', 'Age']]

  7. # 过滤行
  8. filtered_rows = df[df['Age'] > 30]
复制代码
属性和方法:
  1. # 获取列名
  2. columns = df.columns

  3. # 获取形状(行数和列数)
  4. shape = df.shape

  5. # 获取索引
  6. index = df.index

  7. # 获取描述统计信息
  8. stats = df.describe()
复制代码
数据操作:
  1. # 添加新列
  2. df['Salary'] = [50000, 60000, 70000]

  3. # 删除列
  4. df.drop('City', axis=1, inplace=True)

  5. # 排序
  6. df.sort_values(by='Age', ascending=False, inplace=True)

  7. # 重命名列
  8. df.rename(columns={'Name': 'Full Name'}, inplace=True)
复制代码
从外部数据源创建 DataFrame:
  1. # 从CSV文件创建 DataFrame
  2. df_csv = pd.read_csv('example.csv')

  3. # 从Excel文件创建 DataFrame
  4. df_excel = pd.read_excel('example.xlsx')

  5. # 从字典列表创建 DataFrame
  6. data_list = [{'Name': 'Alice', 'Age': 25}, {'Name': 'Bob', 'Age': 30}]
  7. df_from_list = pd.DataFrame(data_list)
复制代码
注意事项:

DataFrame 是一种灵活的数据结构,可以容纳不同数据类型的列。
列名和行索引可以是字符串、整数等。
DataFrame 可以通过多种方式进行数据选择、过滤、修改和分析。
通过对 DataFrame 的操作,可以进行数据清洗、转换、分析和可视化等工作。

论坛官方微信、群(期货热点、量化探讨、开户与绑定实盘)
 
期货论坛 - 版权/免责声明   1.本站发布源码(包括函数、指标、策略等)均属开放源码,用意在于让使用者学习程序化语法撰写,使用者可以任意修改语法內容并调整参数。仅限用于个人学习使用,请勿转载、滥用,严禁私自连接实盘账户交易
  2.本站发布资讯(包括文章、视频、历史记录、教材、评论、资讯、交易方案等)均系转载自网络主流媒体,内容仅为作者当日个人观点,本网转载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。本网不对该类信息或数据做任何保证。不对您构成任何投资建议,不能依靠信息而取代自身独立判断,不对因使用本篇文章所诉信息或观点等导致的损失承担任何责任。
  3.本站发布资源(包括书籍、杂志、文档、软件等)均从互联网搜索而来,仅供个人免费交流学习,不可用作商业用途,本站不对显示的内容承担任何责任。请在下载后24小时内删除。如果喜欢,请购买正版,谢谢合作!
  4.龙听期货论坛原创文章属本网版权作品,转载须注明来源“龙听期货论坛”,违者本网将保留追究其相关法律责任的权力。本论坛除发布原创文章外,亦致力于优秀财经文章的交流分享,部分文章推送时若未能及时与原作者取得联系并涉及版权问题时,请及时联系删除。联系方式:http://www.qhlt.cn/thread-262-1-1.html
如何访问权限为100/255贴子:/thread-37840-1-1.html;注册后仍无法回复:/thread-23-1-1.html;微信/QQ群:/thread-262-1-1.html;网盘链接失效解决办法:/thread-93307-1-1.html

返回列表