如何提取 DataFrame 中末尾连续同号段(含零过渡)的所有行

轻敏大大_3219

轻敏大大_3219

2026-02-10

743人浏览

原创

如何提取 DataFrame 中末尾连续同号段(含零过渡)的所有行

本文介绍一种高效方法,用于从 pandas dataframe 中精准提取“末尾最后一个符号变化点之后”的所有连续行——即从倒数第一个符号切换位置起,直至数据末尾,自动跳过中间零值干扰,适用于高频振荡时序数据的切片分析。

在处理金融信号、传感器读数或任何具有正负交替特性的时序数据时,常需聚焦于“最新一段稳定趋势”:例如,当序列末尾连续为正值(或负值),而其前一个非零值符号相反,则我们希望提取该段全部行(含中间的零值)。难点在于:零值不改变符号但会中断判断;符号切换可能发生在任意位置;必须严格定位“最后一次切换”之后的子序列。

下面给出稳健、向量化、无需循环的解决方案:

✅ 核心思路

  1. 屏蔽零值:用 .mask(df['v'].eq(0)) 将 0 视为缺失,避免其干扰符号逻辑;
  2. 前向填充(ffill):使零值继承前一个有效符号,实现“零值过渡归组”;
  3. 检测符号切换:计算相邻两值乘积 ≤ 0(即异号或任一为零),生成布尔标志;
  4. 累计分组:用 .cumsum() 将每次切换视为新组起点,末尾同号段必属同一最大组号;
  5. 提取末组:grp.eq(grp.max()) 精准筛选出最后一段连续同号(含过渡零)区域。

? 完整示例代码

import pandas as pd
import numpy as np

# 构造可复现示例(含零值与符号切换)
np.random.seed(42)
df = pd.DataFrame({
    'v': [1, 2, 3, -4, 0, 1, 2, -1, 0, 0, 5, 6]
})
print("原始数据:")
print(df)

# 步骤执行
s = df['v'].mask(df['v'] == 0).ffill()        # 屏蔽零并前向填充符号
grp = (s * s.shift()).le(0).cumsum()         # 相邻乘积≤0 → 切换点,cumsum分组
result = df[grp == grp.max()].reset_index(drop=True)

print("\n末尾同号段(含零过渡):")
print(result)

输出结果:

原始数据:
    v
0   1
1   2
2   3
3  -4
4   0
5   1
6   2
7  -1
8   0
9   0
10  5
11  6

末尾同号段(含零过渡):
    v
0   5
1   6
? 注意:第8–9行的 0 被前向填充为 −1(来自索引7),但因索引10值为 5(正),−1 × 5

⚠️ 关键注意事项

  • 零值处理策略可调:若需将零视为独立状态(而非过渡),可改用 np.sign(df['v']) 并自定义零映射(如 sign=0),再基于 diff().ne(0) 检测变化;
  • 首行边界:s.shift() 使首行为 NaN,乘积为 NaN → .le(0) 返回 False,不影响分组逻辑;
  • 性能优势:全程使用 Pandas 向量化操作,即使百万行也能毫秒级完成,远优于 iterrows() 或 apply;
  • 扩展性:该模式可轻松适配多列联合符号判断(如 df[['v', 'w']].apply(np.sign, axis=1))。

✅ 总结

本文方法以“符号分组 + 末组提取”为核心,兼顾鲁棒性与效率,彻底解决“末尾最后一段同号区间提取”这一典型时序切片需求。它不依赖固定窗口、不遍历索引、天然兼容零值,并可通过微调 mask 和 sign 逻辑适配各类业务定义——是处理振荡型时间序列数据的必备技巧之一。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

340

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

272

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

751

25

go语言 数组和切片
go语言 数组和切片

本专题整合了go语言数组和切片的区别与含义,阅读专题下面的文章了解更多详细内容。

2025.09.03

1992

14

传感器故障解决方法
传感器故障解决方法

传感器故障排除指南:识别故障症状(如误读或错误代码)。检查电源和连接(确保连接牢固,无损坏)。校准传感器(遵循制造商说明)。诊断内部故障(目视检查、信号测试、环境影响评估)。更换传感器(选择相同规格,遵循安装说明)。验证修复(检查信号准确性,监测异常行为)。

2024.06.04

4544

7

Uvicorn 报错与问题解决教程
Uvicorn 报错与问题解决教程

本专题汇总了Uvicorn服务器常见问题与报错解决的教程合集,涵盖启动失败、端口占用、模块导入错误、事件循环冲突及热重载失效等典型故障的排查思路。同时整理了多进程与Worker配置、SSL/HTTPS证书报错、跨域与代理配置等实战解决方案,助你快速定位并解决Uvicorn运行中的各类问题。

2026.11.02

0

14

Uvicorn使用教程
Uvicorn使用教程

本专题汇总了Uvicorn使用教程与启动运行指南,涵盖其作为Python ASGI服务器的定位与特点,以及命令行启动(uvicorn main:app --reload)、参数配置(host/port/workers)、程序内嵌运行与Gunicorn结合部署等核心用法。同时整理了热重载调试、日志配置与生产环境部署优化等技巧,助你快速掌握Uvicorn的运行与配置。

2026.11.02

0

17

Uvicorn安装配置教程
Uvicorn安装配置教程

本专题汇总了Uvicorn的安装配置教程与部署指南,涵盖通过pip安装Uvicorn、启动FastAPI/Starlette应用、开发模式热重载(--reload)及多进程工作模式配置等核心操作。同时整理了结合Gunicorn的生产部署方案、HTTPS与反向代理配置及性能调优技巧,助你快速完成Uvicorn服务的安装与上线部署。

2026.11.02

0

17

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

2026.10.28

100

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习