如何在 Pandas 中按 ID 匹配列名,将多列堆叠为单列(保留前两列不变)

云雪吖_4935

云雪吖_4935

2026-09-12

222人浏览

原创

如何在 Pandas 中按 ID 匹配列名,将多列堆叠为单列(保留前两列不变)

本文介绍使用 pandas.melt() 配合布尔索引,将编号列(如 '1', '2', '3')智能堆叠为一列 value:仅保留列名与 id 值相等的单元格,其余丢弃,完美实现“按 ID 动态取值”的宽转长操作。

本文介绍使用 `pandas.melt()` 配合布尔索引,将编号列(如 '1', '2', '3')智能堆叠为一列 `value`:仅保留列名与 `id` 值相等的单元格,其余丢弃,完美实现“按 id 动态取值”的宽转长操作。

在数据处理中,常遇到一种特殊宽表结构:前两列为标识字段(如 iddate),后续多列为以数字命名的“ID 映射列”(如 '1', '2', '3', …, '100'),每行中仅对应其 id 列号的那列有有效值,其余列为空或冗余。目标是将这些编号列“折叠”为单一 value 列,且确保每个 (id, date) 组合只取其 id 所指列的值。

直接调用 stack() 或简单 melt() 无法满足该逻辑——因为我们需要的是条件性提取,而非无差别堆叠。正确解法分三步:

  1. melt() 宽转长:以 ['id', 'date'] 为标识变量,将所有编号列(var_name='id2')转为行,生成中间表,含 id, date, id2(列名字符串), value 四列;
  2. 匹配过滤:利用 df.id == id2.astype(int) 筛出 id 与列名数值一致的行(如 id=2 的行只保留原 '2' 列的值);
  3. 清理输出:删除临时列 id2,得到最终三列结果。

以下是完整可运行示例:

import pandas as pd
import numpy as np

# 构造示例数据(注意:列名 '1','2','3' 为字符串)
df = pd.DataFrame({
    'id': [1, 1, 1, 2, 2, 2, 3, 3, 3],
    'date': ['1/1/00', '1/2/00', '1/3/00'] * 3,
    '1': [np.nan, 100.0, np.nan] * 3,
    '2': [200, 200, 200] * 3,
    '3': [300, 300, 300] * 3
})

# 步骤1:熔化,将编号列转为变量
melted = df.melt(id_vars=['id', 'date'], var_name='id2', value_name='value')

# 步骤2:筛选 id 与列名数值相等的行(注意列名是字符串,需转 int)
mask = melted['id'] == melted['id2'].astype(int)
result = melted[mask].drop(columns='id2').reset_index(drop=True)

print(result)

✅ 输出符合预期:

   id    date  value
0   1  1/1/00    NaN
1   1  1/2/00  100.0
2   1  1/3/00    NaN
3   2  1/1/00  200.0
4   2  1/2/00  200.0
5   2  1/3/00  200.0
6   3  1/1/00  300.0
7   3  1/2/00  300.0
8   3  1/3/00  300.0

⚠️ 关键注意事项

  • 编号列名必须为字符串类型(如 '1', '2'),若为整数列名(1, 2),melt() 仍可工作,但 astype(int) 可省略;
  • 若存在缺失列名(如 id=4 但无 '4' 列),对应行将被自动过滤掉;
  • 空值(NaN)会被自然保留,无需额外处理;
  • 列名数量巨大时(如 '1''500'),该方法依然高效,无需循环。

此方案兼具可读性与健壮性,是处理“ID 驱动列映射”类宽表的标准范式。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

280

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

212

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

251

25

Vibeknow在线使用入口合集
Vibeknow在线使用入口合集

本专题汇总了Vibeknow在线创作视频的官方入口及网页版使用教程,涵盖PPT、PDF、Word等文档一键转讲解视频的核心操作,并整理了免费版水印规则与手机端浏览器访问指南,助你快速将知识内容视频化。

2026.09.21

0

20

NumPy随机数文件读写与dtype数据类型
NumPy随机数文件读写与dtype数据类型

本专题整理 NumPy 随机数、文件读写与 dtype 数据类型相关教程,覆盖 Generator/random、随机数种子、正态分布采样、npy/npz/CSV/TXT 保存读取、loadtxt/savetxt、memmap、大文件处理、astype 类型转换、结构化 dtype、整数溢出和精度丢失等场景。

2026.09.21

0

24

NumPy矩阵运算与线性代数计算
NumPy矩阵运算与线性代数计算

本专题整理 NumPy 矩阵运算与线性代数计算相关教程,覆盖矩阵乘法、dot 与 @ 运算符、逆矩阵、行列式、特征值与特征向量、SVD、线性方程组、欧氏距离、矩阵分解和大规模矩阵性能优化等内容,帮助读者掌握 np.linalg 与矩阵计算实战。

2026.09.21

0

20

NumPy广播机制数学运算与统计分析
NumPy广播机制数学运算与统计分析

本专题整理 NumPy 广播机制、数组数学运算与统计分析相关教程,覆盖广播规则、维度对齐、矩阵与数组加减除法、向量化计算、均值方差、分位数、中位数、直方图和 unique 频次统计等场景,帮助读者掌握 ndarray 高效计算与统计处理方法。

2026.09.21

0

17

NumPy数组创建索引切片与数据选择
NumPy数组创建索引切片与数据选择

本专题整理 NumPy 数组创建、索引、切片与数据选择相关教程,覆盖 np.array、zeros/ones、多维数组形状、基础切片、花式索引、布尔索引、条件筛选、视图与副本等常用场景,帮助读者系统掌握 ndarray 数据构造与高效提取方法。

2026.09.21

0

12

Aionclaw智能助手介绍
Aionclaw智能助手介绍

本专题汇总了AionClaw(AI龙虾助手)的功能介绍与在线使用入口。AionClaw是杭州趣猿人工智能有限公司推出的桌面级AI智能体,能直接在电脑上读写文件、运行脚本、操作浏览器,自动交付Word、PPT、Excel等成品。

2026.09.20

20

13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习