如何在 Pandas 中保留前两列不变,将后续多列按行匹配堆叠为单列

雨芳君_4871

雨芳君_4871

2026-09-12

323人浏览

原创

如何在 Pandas 中保留前两列不变,将后续多列按行匹配堆叠为单列

本文介绍使用 pandas.melt() 配合条件筛选,将 ID 和日期列固定、其余数值列按列名与 ID 值动态对齐,堆叠为单一 value 列的专业方法。

本文介绍使用 `pandas.melt()` 配合条件筛选,将 id 和日期列固定、其余数值列按列名与 id 值动态对齐,堆叠为单一 value 列的专业方法。

在数据处理中,常遇到宽表结构:前几列为标识字段(如 iddate),后续多列为以 ID 命名的指标列(如列名 '1', '2', '3'),每行需从“对应 ID 名称的列”中提取值。目标是将这些列“逻辑折叠”为一列 value,而非简单垂直拼接——关键在于按行匹配:第 i 行的 value 应取自列名为 df.iloc[i]['id'] 的那一列

这无法通过 stack() 直接实现(因其仅按索引层级展开,不支持列名与某列值的动态关联),而 melt() 是更合适的基础操作。完整流程如下:

  1. 使用 melt() 展开所有非标识列,指定 id_vars=['id', 'date'] 保持这两列不变,var_name 将原列名转为新列(如 'id2');
  2. 添加条件过滤:只保留 id == id2.astype(int) 的行(即当前行的 id 值恰好等于被熔化的列名);
  3. 清理冗余列:删除临时生成的 id2 列,得到最终三列结果。

以下是可直接运行的示例代码:

import pandas as pd
import numpy as np

# 构造原始 DataFrame
df = pd.DataFrame({
    'id': [1, 1, 1, 2, 2, 2, 3, 3, 3],
    'date': ['1/1/00', '1/2/00', '1/3/00'] * 3,
    '1': [np.nan, 100.0, np.nan] * 3,
    '2': [200, 200, 200] * 3,
    '3': [300, 300, 300] * 3
})

# 步骤 1:熔化,将列名转为变量
melted = df.melt(id_vars=['id', 'date'], var_name='id2', value_name='value')

# 步骤 2:筛选 —— 仅保留 id 与列名(转为整数)相等的行
result = melted[melted['id'] == melted['id2'].astype(int)].drop('id2', axis=1).reset_index(drop=True)

print(result)

✅ 输出结果严格匹配预期:每行 value 来自原表中列名等于该行 id 的列,空值(NaN)也被正确保留。

⚠️ 注意事项:

  • 列名必须为可转为整数的字符串(如 '1', '2', '10'),若含前导零或非数字字符,需先清洗 var_name
  • 若存在缺失列(如 id=4 但无 '4' 列),对应行将被自动过滤掉,建议提前校验列名覆盖范围;
  • 性能提示:对于超大宽表(数百列),melt + boolean indexing 仍高效;避免使用 apply(lambda row: row[str(row['id'])]) 等逐行操作。

该方法逻辑清晰、可读性强,是处理“ID驱动列选择”类宽表规整任务的标准实践。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

280

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

192

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

251

25

Aionclaw智能助手介绍
Aionclaw智能助手介绍

本专题汇总了AionClaw(AI龙虾助手)的功能介绍与在线使用入口。AionClaw是杭州趣猿人工智能有限公司推出的桌面级AI智能体,能直接在电脑上读写文件、运行脚本、操作浏览器,自动交付Word、PPT、Excel等成品。

2026.09.20

0

13

AionClaw AI智能体与电脑自动化任务执行功能使用教程
AionClaw AI智能体与电脑自动化任务执行功能使用教程

AionClaw专题整理AI智能体与电脑自动化相关功能使用教程,涵盖安装部署、AI任务执行、Skills技能、文件处理、浏览器控制、电脑操作、持久记忆、聊天工具连接以及办公、编程和内容创作等功能,帮助用户快速掌握AionClaw的实际使用方法。

2026.09.20

0

15

AI视频生成软件推荐
AI视频生成软件推荐

本专题汇总了当前主流的AI视频生成软件推荐与排行榜单,涵盖seko、AniShort、剧云、Lovart、LiblibAI及立刻mv等热门工具。同时整理了各软件在文生视频、图生视频、时长限制、画质表现及免费额度等方面的差异对比,助您快速选对适合创作需求的AI视频生成工具。

2026.09.16

160

9

ai生成视频的工具免费版合集
ai生成视频的工具免费版合集

本专题汇总了当前免费AI生成视频工具的排行榜与推荐清单,涵盖seko、讯飞智作、AniShort及剧云、Lovart等多模型集成平台。同时整理了各工具的免费额度、输出时长、水印政策及适用场景差异,助您快速选择合适工具开启AI视频创作。

2026.09.16

60

10

Pandas时间序列分析与可视化报表
Pandas时间序列分析与可视化报表

本专题整理Pandas日期转换、时间索引、重采样、滚动窗口、时区处理、plot绘图、Styler表格样式和报表输出方法。

2026.09.16

80

23

Pandas数据筛选索引与清洗处理
Pandas数据筛选索引与清洗处理

本专题整理Pandas中的loc、iloc、条件筛选、query查询、缺失值处理、重复值删除、类型转换和字符串列清洗方法。

2026.09.16

60

25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133万人学习