如何正确将日频数据重采样为小时频数据(含末尾日期完整填充)

大涛酱_4963

大涛酱_4963

2026-06-05

205人浏览

原创

如何正确将日频数据重采样为小时频数据(含末尾日期完整填充)

使用 pandas 的 resample + ffill 将日频数据转为小时频时,末尾日期常被截断——因重采样默认右边界不闭合,导致最后一天仅生成一个时间点(如 2024-01-02 00:00)。本文提供可靠解决方案:扩展索引+后过滤,确保每日均生成完整24小时记录。

使用 pandas 的 resample + ffill 将日频数据转为小时频时,末尾日期常被截断——因重采样默认右边界不闭合,导致最后一天仅生成一个时间点(如 2024-01-02 00:00)。本文提供可靠解决方案:扩展索引+后过滤,确保每日均生成完整24小时记录。

在使用 DataFrame.resample("h").ffill() 进行日→小时上采样时,一个常见却易被忽略的问题是:末尾日期无法生成完整的24小时记录。其根本原因在于 pandas 的 resample 默认采用左闭右开区间(closed='left', label='left'),当原始索引最大值为 2024-01-02 00:00:00(即纯日期转为午夜时间戳)时,重采样生成的时间桶覆盖范围为 [2024-01-01 00:00, 2024-01-02 00:00),因此 2024-01-02 仅贡献起始时刻,后续23小时无对应源值可前向填充。

以下是最简复现与推荐解法:

import pandas as pd

# 原始日频数据(2天)
T1 = pd.Timestamp("2024-01-01")
T2 = pd.Timestamp("2024-01-02")
df = pd.DataFrame({"T": [T1, T2], "V": [1, 2]})

# ❌ 错误做法:直接 resample → 仅得25行(24h for T1 + 1h for T2)
result_bad = df.set_index("T").resample("h").ffill()
print(f"错误结果长度: {len(result_bad)}")  # 输出: 25

# ✅ 正确做法:扩展索引至下一自然日,再前向填充并清理
T3 = T2 + pd.Timedelta("1D")  # 添加占位日期:2024-01-03
df_extended = pd.DataFrame({
    "T": [T1, T2, T3],
    "V": [1, 2, pd.NA]  # 末尾值设为 NA,避免污染
})

result_good = (df_extended
               .set_index("T")
               .resample("h", closed="left")  # 显式声明边界(可选,增强可读性)
               .ffill()
               .dropna(subset=["V"]))  # 精准剔除扩展引入的无效行

print(f"正确结果长度: {len(result_good)}")  # 输出: 48
print(result_good.head(3))
#                      V
# T                   
# 2024-01-01 00:00:00  1.0
# 2024-01-01 01:00:00  1.0
# 2024-01-01 02:00:00  1.0

关键要点说明:

大模型实验室Lab4AI
大模型实验室Lab4AI

一款AI开发辅助工具,主要用于高性能算力驱动的AI实践内容生态社区,适合需要提升相关任务效率的用户。

下载
  • ✅ 扩展索引是核心技巧:添加一个超出原数据范围的“哨兵时间点”(如 T2 + 1D),迫使 resample 生成覆盖 T2 全天的24个桶;
  • ✅ dropna(subset=["V"]) 比 dropna() 更安全:避免因其他列存在空值而误删有效行;
  • ⚠️ 无需修改 closed/label 参数:默认行为已足够,显式设置仅用于代码自解释;
  • ? 通用性验证:该方法对任意长度的日频序列均适用——只需在末尾追加 max_date + 1D 即可。

最终,你将获得严格按小时对齐、每日24行、末尾日期完整填充的理想结果,彻底规避 pandas 重采样在边界处理上的“隐形截断”陷阱。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

340

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

272

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

791

25

Docker Desktop怎么设置端口映射
Docker Desktop怎么设置端口映射

本专题聚焦Docker Desktop容器端口映射与访问配置,整理从创建容器、设置端口绑定到验证本地服务访问的操作流程。针对端口被占用、映射配置错误、容器服务无法访问等情况,也提供相应的检查方向,方便用户完成端口配置。

2026.11.03

0

18

Docker Desktop镜像构建教程
Docker Desktop镜像构建教程

想使用Docker Desktop将本地项目构建成Docker镜像?本专题围绕镜像构建的实际操作展开,介绍Dockerfile编写、构建命令使用、镜像标签设置和构建日志查看等内容,同时整理镜像无法生成、依赖安装失败及构建缓存异常等问题的排查思路。

2026.11.03

0

11

Docker Desktop容器创建指南
Docker Desktop容器创建指南

本专题聚焦Docker Desktop容器创建与运行配置,介绍通过本地镜像或远程镜像创建容器的方法,以及容器启动、终端访问、日志查看和基础管理等操作。针对端口冲突、参数配置不当、容器无法启动等情况,也整理了相应的排查方向。

2026.11.03

0

11

Tailwind CSS 如何制作导航栏和卡片
Tailwind CSS 如何制作导航栏和卡片

用 Tailwind CSS 制作导航栏和卡片,可先搭建语义化结构,再组合 Flex、Grid、间距、圆角与阴影类。这里整理横向导航、移动端菜单、卡片网格及悬停效果的相关文章,帮助你把常见页面组件做得清晰且适配不同屏幕。

2026.11.03

20

17

Tailwind CSS 响应式布局怎么写
Tailwind CSS 响应式布局怎么写

Tailwind CSS 响应式布局通常从移动端样式写起,再用 sm、md、lg 等前缀调整不同屏幕宽度下的网格、间距和导航。本专题整理断点配置、Grid 与 Flex 自适应布局及常见溢出问题,帮助你逐步完成多设备适配。

2026.11.03

0

19

Tailwind CSS 常用类名怎么记
Tailwind CSS 常用类名怎么记

Tailwind CSS 类名很多,先按布局、间距、文字、颜色和状态分组记忆,再通过官方文档检索具体写法。本专题结合类名排序、动态拼接失效、自定义实用类等问题,帮助你建立常用类名的速查方法。

2026.11.03

0

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习