如何基于原始行值在 Pandas DataFrame 中动态生成新行

星萱君_3047

星萱君_3047

2026-11-11

745人浏览

原创

如何基于原始行值在 Pandas DataFrame 中动态生成新行

本文介绍一种高效、向量化的方法,利用布尔索引、Index.repeat 和 groupby.cumcount,对包含特定关键词(如 "TestString")的行进行三等分扩展:每匹配一行,生成3个新行,均分原时长为5,并按+5递增起始时间点,同时追加 _1/_2/_3 后缀。

本文介绍一种高效、向量化的方法,利用布尔索引、index.repeat 和 groupby.cumcount,对包含特定关键词(如 "teststring")的行进行三等分扩展:每匹配一行,生成3个新行,均分原时长为5,并按+5递增起始时间点,同时追加 _1/_2/_3 后缀。

在神经科学或行为实验数据分析中,常需将一个代表复合事件(如 "SocTestString")的原始试次,拆解为多个等时长、连续时间窗的子试次(例如每个5秒),以适配后续的时序建模或BOLD响应建模。Pandas 提供了无需显式循环的向量化方案,核心思路是:先复制目标行,再批量修正新行的 onset、duration 和 type 字段。

以下为完整实现代码(含详细注释):

import pandas as pd

test = pd.DataFrame({
    'onset': [1, 3, 18, 33, 35, 50],
    'duration': [2, 15, 15, 2, 15, 15],
    'type': ['Instr', 'Remember', 'SocTestString', 'Rating', 'SelfTestString', 'XXX']
})

N = 3  # 每个匹配行扩展为 N 行(此处固定为 3)
m = test['type'].str.contains('TestString')  # 布尔掩码:标记需扩展的行

# 步骤1:重复行 —— 对 m 为 True 的行重复 (N-1) 次(即原行 + 新增2行 → 共3行)
# .add(1) 确保原行至少保留1次;.mul(N-1) 计算需额外复制次数
out = test.loc[test.index.repeat(m.mul(N - 1).add(1))]

# 步骤2:更新 duration —— 仅对原匹配行对应的所有新行设为 5(即原 duration / N)
out.loc[m, 'duration'] = 5  # 更直观:直接赋值,而非除法(避免浮点误差)

# 步骤3:计算累计序号(0,1,2)并更新 onset
cc = out.loc[m].groupby(level=0).cumcount()  # level=0 按原始索引分组,确保同一原行内编号连续
out.loc[m, 'onset'] += cc * 5  # onset_i = original_onset + i * 5

# 步骤4:更新 type —— 追加 _1, _2, _3 后缀
out.loc[m, 'type'] += '_' + (cc + 1).astype(str)

# 步骤5:重置索引(可选,但推荐用于清晰性)
out = out.reset_index(drop=True)
print(out)

✅ 输出结果与预期完全一致:

   onset  duration              type
0      1         2             Instr
1      3        15          Remember
2     18         5   SocTestString_1
3     23         5   SocTestString_2
4     28         5   SocTestString_3
5     33         2            Rating
6     35         5  SelfTestString_1
7     40         5  SelfTestString_2
8     45         5  SelfTestString_3
9     50        15               XXX

⚠️ 注意事项:

  • 该方法要求原始 DataFrame 的索引无重复值(test.index.is_unique == True),否则 groupby(level=0) 分组可能出错;
  • 若需支持任意 N(不局限于3),只需修改 N 变量并确保 duration 被均分为 original_duration / N(注意整除或四舍五入逻辑);
  • 若 "TestString" 匹配逻辑需更严格(如精确匹配、忽略大小写),可改用 str.fullmatch 或添加 case=False 参数;
  • 扩展后 onset 严格递增,但若原始数据存在重叠或倒序,建议扩展前先按 onset 排序。

此方案兼顾性能与可读性,适用于数千行规模的数据处理,在 fMRI 实验设计解析、EEG 事件序列重构等场景中具有广泛实用性。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

360

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

272

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

911

25

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

2026.11.06

60

12

Postman请求头Headers怎么设置
Postman请求头Headers怎么设置

围绕Postman HTTP请求头配置展开,讲解Headers选项的具体使用方式,包括Key和Value参数填写、请求头信息添加、常见Header字段设置及请求头修改方法,帮助用户解决接口调试过程中遇到的请求头配置问题。

2026.11.06

40

13

Postman接口请求发送教程
Postman接口请求发送教程

详细介绍Postman接口请求的创建与发送方法,涵盖GET和POST请求、URL配置、请求参数、Headers请求头、Body请求体设置以及响应结果查看,帮助用户掌握Postman接口请求的完整操作流程。

2026.11.06

40

10

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

2026.11.05

60

12

DBeaver安全防护教程大全
DBeaver安全防护教程大全

DBeaver安全防护专题,围绕数据库连接安全、账号密码保护和访问权限管理展开,整理SSL/TLS加密连接、SSH隧道、数据库凭据保存及证书验证等配置方法,同时介绍敏感信息保护、远程连接风险和高权限账号使用等注意事项,帮助用户提高数据库日常管理的安全性。

2026.11.05

40

12

DBeaver连接创建与配置教程
DBeaver连接创建与配置教程

本专题聚焦DBeaver数据库连接配置与管理,覆盖从新建连接、选择数据库类型到填写连接参数和验证连接的完整流程。针对MySQL、PostgreSQL、SQL Server等常见数据库,整理相应的连接设置方法,并提供驱动缺失、认证失败和连接异常等问题的排查方向。

2026.11.04

60

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.3万人学习