如何创建一个部分列共享底层数据、部分列独立存储的DataFrame

冬瑶姑娘_9479

冬瑶姑娘_9479

2026-06-02

739人浏览

原创

如何创建一个部分列共享底层数据、部分列独立存储的DataFrame

Pandas中可通过copy=False让多个DataFrame共享同一数组的某些列,而新增列则独立存储,从而构造出“部分视图、部分副本”的混合DataFrame。

python中可通过`copy=false`让多个dataframe共享同一数组的某些列,而新增列则独立存储,从而构造出“部分视图、部分副本”的混合dataframe。

在Pandas中,DataFrame本身不直接支持“部分列是视图、部分列是副本”的显式声明,但通过底层NumPy数组的内存共享机制与DataFrame构造逻辑,可以自然形成这种混合状态:当多个DataFrame基于同一底层数组(如np.ndarray)构建且指定copy=False时,它们的原始列会共享内存;而后续通过赋值新增的列(如df["new_col"] = value)则默认以独立副本形式存在,不受原始数组变更影响——除非该列本身也由视图派生。

以下是一个典型示例:

import pandas as pd
import numpy as np

# 创建共享底层数组
arr = np.array([[1, 2, 3],
                [4, 5, 6]], dtype=float)

# df1 和 df2 均基于 arr 构建,且 copy=False → 列 a1/b1/c1 与 a2/b2/c2 共享 arr 内存
df1 = pd.DataFrame(arr, columns=["a1", "b1", "c1"], copy=False)
df2 = pd.DataFrame(arr, columns=["a2", "b2", "c2"], copy=False)

# 向 df2 添加新列 d —— 此列独立于 arr,是深拷贝(标量广播生成新数组)
df2["d"] = 999

print("初始状态:")
print("df1:\n", df1)
print("df2:\n", df2)

输出:

初始状态:
df1:
    a1   b1   c1
0  1.0  2.0  3.0
1  4.0  5.0  6.0
df2:
    a2   b2   c2    d
0  1.0  2.0  3.0  999
1  4.0  5.0  6.0  999

此时,df1与df2的前三列(a1/b1/c1和a2/b2/c2)均指向arr的同一内存块;而df2["d"]是独立分配的新数组,修改它不会影响df1。

进一步验证视图行为:

Wegic
Wegic

Wegic是一款通过对话生成、修改和上线网站的 AI 建站工具。

下载
# 修改 df1 的整行(触发对 arr 的写入)
df1.loc[0, :] = -1

print("\n修改 df1 第0行后:")
print("df1:\n", df1)
print("df2:\n", df2)

输出:

修改 df1 第0行后:
df1:
    a1   b1   c1
0 -1.0 -1.0 -1.0
1  4.0  5.0  6.0
df2:
    a2   b2   c2    d
0 -1.0 -1.0 -1.0  999
1  4.0  5.0  6.0  999

可见,df2的a2/b2/c2同步更新,证明其为arr的视图;而d列保持不变,证实其为独立副本。

⚠️ 注意事项:

  • copy=False仅在构造时生效,且要求输入数据支持零拷贝(如np.ndarray);若传入列表、字典等,Pandas仍可能强制复制。
  • 视图行为依赖底层NumPy数组的可写性(arr.flags.writeable),若数组被设为只读,修改将抛出ValueError。
  • 新增列(如df["col"] = ...)默认不共享内存,但若显式使用pd.Series(arr[:, 0], copy=False)等构造,则可能引入新视图——需谨慎控制。
  • 此类混合结构易引发隐式副作用,生产环境建议显式标注或使用.copy()隔离关键数据。

综上,虽然Pandas未提供“半视图DataFrame”的API,但借助底层数组共享与列动态添加机制,完全可实现所需语义:原始列构成视图,新增列构成副本——这是一种实用且可控的内存优化模式。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

340

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

272

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

751

25

Uvicorn 报错与问题解决教程
Uvicorn 报错与问题解决教程

本专题汇总了Uvicorn服务器常见问题与报错解决的教程合集,涵盖启动失败、端口占用、模块导入错误、事件循环冲突及热重载失效等典型故障的排查思路。同时整理了多进程与Worker配置、SSL/HTTPS证书报错、跨域与代理配置等实战解决方案,助你快速定位并解决Uvicorn运行中的各类问题。

2026.11.02

0

14

Uvicorn使用教程
Uvicorn使用教程

本专题汇总了Uvicorn使用教程与启动运行指南,涵盖其作为Python ASGI服务器的定位与特点,以及命令行启动(uvicorn main:app --reload)、参数配置(host/port/workers)、程序内嵌运行与Gunicorn结合部署等核心用法。同时整理了热重载调试、日志配置与生产环境部署优化等技巧,助你快速掌握Uvicorn的运行与配置。

2026.11.02

0

17

Uvicorn安装配置教程
Uvicorn安装配置教程

本专题汇总了Uvicorn的安装配置教程与部署指南,涵盖通过pip安装Uvicorn、启动FastAPI/Starlette应用、开发模式热重载(--reload)及多进程工作模式配置等核心操作。同时整理了结合Gunicorn的生产部署方案、HTTPS与反向代理配置及性能调优技巧,助你快速完成Uvicorn服务的安装与上线部署。

2026.11.02

0

17

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

2026.10.28

120

16

Vite 如何搭配 Vue.js
Vite 如何搭配 Vue.js

Vite搭配Vue.js专题汇集创建Vue 3项目、配置开发环境、路径别名、Vue插件、代理、多环境构建与调试的已审核文章,帮助读者完成从初始化到日常开发的配置。

2026.10.28

80

15

Vite 项目目录怎么看
Vite 项目目录怎么看

Vite项目目录专题汇集入口文件、src源码、public静态资源、路径别名、项目根目录和构建输出目录相关的已审核文章,帮助读者理解各文件夹的用途与引用方式。

2026.10.28

280

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习