使用 Pandas 填充缺失值:基于父键映射上级行的 Value 值

雨芳同学_7312

雨芳同学_7312

2026-02-02

297人浏览

原创

使用 Pandas 填充缺失值:基于父键映射上级行的 Value 值

本文介绍如何利用 `map()` 和 `fillna()` 高效填充 dataframe 中缺失的 value 值——当某行 value 为 none 时,自动查找其 parent 键对应行的 value 值进行填充,形成层级继承关系。

在数据处理中,常遇到具有父子层级关系的表格结构(如组织架构、配置继承、依赖树等),其中子项的某些字段可能为空,需从其指定的父项中继承值。Pandas 提供了简洁而高效的向量化方案来实现这一逻辑,无需循环或递归。

核心思路

  1. 构建键值映射表:将 Key → Value 的对应关系提取为 Python 字典(dict(df[['Key', 'Value']].values)),作为查找表;
  2. 映射父键值:对 Parent 列调用 .map(m),将每个父键(如 "Key1")映射为其对应的 Value(如 246),未匹配则返回 NaN;
  3. 安全填充:使用 .fillna() 将原 Value 列中的 None/NaN 替换为映射结果,保留已有非空值不变。

完整示例代码

import pandas as pd
import numpy as np

# 构造原始数据(注意:Value 列含 None 和字符串 "434",需统一类型以保证一致性)
data = [['Key1', 'Key10', 246], ['Key2', 'Key1', None], ['Key3', 'Key14', "434"]]
df = pd.DataFrame(data, columns=['Key', 'Parent', 'Value'])

# 关键步骤:构建 Key→Value 映射并填充
mapping_dict = dict(df[['Key', 'Value']].values)
df['Value'] = df['Value'].fillna(df['Parent'].map(mapping_dict))

print(df)

输出:

Python Hardener
Python Hardener

通过完整的安全审查、代码整洁重构、健壮的错误处理、正确的日志记录以及完整的文档字符串覆盖,强化 Python 脚本。

下载
    Key  Parent Value
0  Key1   Key10   246
1  Key2    Key1   246
2  Key3   Key14   434

注意事项与最佳实践

  • ✅ 类型一致性:确保 Value 列数据类型兼容(建议提前转换为统一数值或字符串类型),避免因混合类型(如 int, str, None)导致 map 失效或隐式转换异常;可添加 df['Value'] = pd.to_numeric(df['Value'], errors='ignore') 进行预处理。
  • ⚠️ 单层继承:本方案仅支持一级父级查找。若需多级向上追溯(如 Key2 → Key1 → Key10),需改用 networkx 构建图结构或编写递归函数,不可直接复用 .map()。
  • ? 缺失父键处理:当 Parent 值在 Key 列中不存在时,.map() 返回 NaN,fillna() 将保持原 None 不变,符合题设“若父不存在则值保持 None”的要求。
  • ? 性能优势:全程向量化操作,时间复杂度为 O(n),远优于 apply() 或 iterrows() 循环,适用于万行级以上数据。

通过这一模式,你可以在不引入额外依赖的前提下,快速实现轻量级的层级值继承逻辑,是 Pandas 数据清洗与关系补全的经典范式之一。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

340

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

272

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

771

25

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.31

3311

5

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

2025.10.31

554

9

c语言 数据类型
c语言 数据类型

本专题整合了c语言数据类型相关内容,阅读专题下面的文章了解更多详细内容。

2026.02.12

562

19

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1858

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2984

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6264

49

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程