如何基于日期范围展开数据并筛选有效状态期的记录

酷明君_7873

酷明君_7873

2026-08-15

395人浏览

原创

如何基于日期范围展开数据并筛选有效状态期的记录

本文介绍如何对原始数据框中每条记录,在指定日期范围内逐日判断其是否处于“开放且未关闭”状态(满足 opendate

本文介绍如何对原始数据框中每条记录,在指定日期范围内逐日判断其是否处于“开放且未关闭”状态(满足 opendate

在时间序列分析与状态快照建模中,常需将静态的生命周期记录(如用户账户、工单、合同)按天展开,生成每个自然日对应的有效状态行。这本质上是「笛卡尔展开 + 条件过滤」操作:对原始数据框的每一行,遍历目标日期范围中的每一天,检查该日是否落在其有效期内,并满足业务类型约束。

以下是一个高效、可读性强的实现方案,使用 pandas 和 datetime 完成:

import pandas as pd
from datetime import datetime, timedelta

# 1. 构建示例数据(注意:OpenDate/ClosedDate 需转为 datetime 类型)
data = {
    'User_Id': [12, 14, 34, 93],
    'OpenDate': ['2024-07-14', '2021-12-26', '2022-05-22', '2021-12-06'],
    'CloseDate': ['2024-08-18', '2021-12-26', '2022-06-12', '2021-12-06'],
    'CloseType': [3, 6, 3, 6]
}
df = pd.DataFrame(data)
df['OpenDate'] = pd.to_datetime(df['OpenDate'])
df['CloseDate'] = pd.to_datetime(df['CloseDate'], errors='coerce')  # 自动转 NaT 处理空值

# 2. 定义目标日期范围(推荐用 pd.date_range,更简洁可靠)
date_range = pd.date_range(start='2024-06-01', end='2024-12-10', freq='D')

# 3. 初始化结果列表
results = []

# 4. 双重循环:逐行 × 逐日判断条件
valid_close_types = {0, 1, 3, 7, 8}  # 使用 set 提升 in 判断效率
for _, row in df.iterrows():
    open_dt = row['OpenDate']
    close_dt = row['CloseDate']
    close_type = row['CloseType']

    for current_date in date_range:
        # SQL 条件等价翻译:
        #   s.OpenDate  @currentDate → pd.isnull(close_dt) or close_dt > current_date
        #   s.CloseType IN (0,1,3,7,8)
        if (open_dt  current_date) and 
            close_type in valid_close_types):
            results.append({
                'CurrentDate': current_date,
                'User_Id': row['User_Id'],
                'OpenDate': open_dt,
                'CloseDate': close_dt,
                'CloseType': close_type
            })

# 5. 构造结果 DataFrame
result_df = pd.DataFrame(results)
print(f"共生成 {len(result_df)} 行有效状态快照")
print(result_df.head(10))

✅ 关键要点说明:

  • 日期类型统一:务必使用 pd.to_datetime() 将字符串列转为 datetime64[ns],否则比较会出错或隐式转换失败;对可能为空的 CloseDate 使用 errors='coerce' 保证 NaT(Not a Time)安全。
  • 空值处理逻辑:pd.isnull(row['CloseDate']) or row['CloseDate'] > current_date 精确复现了 SQL 中 ISNULL(s.CloseDate, '2050-01-01') > @currentDate 的语义——即未关闭(CloseDate 为空)视为长期有效。
  • 性能提示:本方案适用于中小规模数据(merge + query 或 pd.IntervalIndex),避免 Python 层双重循环。
  • CloseType 白名单:使用 set 而非 list 进行成员判断,时间复杂度从 O(n) 降至 O(1),显著提升内层循环效率。

最终输出的 result_df 每一行代表「某用户在某日处于有效开启状态」,可直接用于后续的日粒度聚合分析(如每日活跃用户数、状态分布热力图等)。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

300

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

212

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

371

25

PDF转图片方法
PDF转图片方法

需要把 PDF 页面用于上传、预览、分享或图片归档时,PDF 转图片方法专题整理 JPG/PNG 格式选择、逐页导出、清晰度设置、批量下载和结果检查等流程,帮助用户稳定完成 PDF 图片化处理。

2026.09.30

0

26

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

2026.09.29

0

15

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

200

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

120

15

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

2026.09.23

100

15

Conan创建软件包配方指南
Conan创建软件包配方指南

本专题介绍通过conanfile.py创建软件包的方法,讲解包名、版本、依赖和构建设置等基础信息,以及source、build、package、package_info等常用方法的作用及编写思路。

2026.09.22

60

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习