如何在Python中用Scikit-learn自动输出Pandas数据框?

小晨小哥_2383

小晨小哥_2383

2026-11-01

226人浏览

原创

scikit-learn的fit_transform()默认返回numpy.ndarray而非DataFrame,因设计上不绑定pandas结构;需手动用pd.DataFrame封装并注意列名对齐、索引保留及类型转换。

如何在python中用scikit-learn自动输出pandas数据框?

scikit-learn的fit_transform()默认不返回DataFrame,这是根本原因

scikit-learn几乎所有预处理器(如 StandardScaler、OneHotEncoder、MinMaxScaler)的 fit_transform() 方法都只返回 numpy.ndarray,哪怕输入是 pandas.DataFrame。这不是bug,是设计选择:sklearn专注算法通用性,不绑定pandas结构。

直接用 pd.DataFrame(scaler.fit_transform(df), columns=df.columns, index=df.index) 是最常见补救方式,但要注意三处易错点:

  • 列名可能错位——尤其 OneHotEncoder 会新增列、打乱顺序,不能直接复用原 df.columns
  • 索引丢失——fit_transform() 默认不保留索引,需显式传入 index=df.index
  • 数值类型丢失——比如 int 列经缩放后变成 float64,但pandas不会自动推断回整型

OneHotEncoder输出列名混乱?用get_feature_names_out()对齐

OneHotEncoder 是最容易踩坑的:它生成的新列名(如 color_blue、color_red)和原始列名完全不对应,且 get_feature_names() 已在新版本废弃,必须用 get_feature_names_out()。

正确做法:

from sklearn.preprocessing import OneHotEncoder
import pandas as pd
<p>ohe = OneHotEncoder(drop='first', sparse_output=False)
X_encoded = ohe.fit_transform(df[['color', 'size']])</p><h1>关键:用 get_feature_names_out() 拿真实列名</h1><p>cols_encoded = ohe.get_feature_names_out(['color', 'size'])
df_encoded = pd.DataFrame(X_encoded, columns=cols_encoded, index=df.index)
</p>

注意:sparse_output=False 必须设,否则返回稀疏矩阵,无法直接转DataFrame;drop='first' 会影响列数,所以列名必须从encoder对象里实时取,不能手写。

想一劳永逸?封装成支持DataFrame的Transformer类

如果项目里反复要保留DataFrame结构,自己写一个轻量wrapper比每次手动重建更可靠。核心逻辑就三点:保存输入的列名/索引、调用原transformer、用结果重建DataFrame。

示例(兼容多数预处理器):

macOS UI 自动化技能包 —— 用 Python 控制你的 Mac
macOS UI 自动化技能包 —— 用 Python 控制你的 Mac

让 macOS 自动化像说话一样简单 —— 用代码控制你的 Mac,无需学习 AppleScript 系统要求 macOS 14+ (Sonoma) Python 3.9+ 需要开启:辅助功能 + 屏幕录制权限

下载
class DataFrameTransformer:
    def __init__(self, transformer):
        self.transformer = transformer
        self.columns_ = None
        self.index_ = None
<pre class="brush:php;toolbar:false;">def fit(self, X, y=None):
    self.transformer.fit(X)
    self.columns_ = X.columns
    self.index_ = X.index
    return self

def transform(self, X):
    X_trans = self.transformer.transform(X)
    # 处理 OneHotEncoder 等可能改变列数的情况
    if hasattr(self.transformer, 'get_feature_names_out'):
        cols = self.transformer.get_feature_names_out(X.columns)
    else:
        cols = self.columns_
    return pd.DataFrame(X_trans, columns=cols, index=X.index)

用法:df_scaled = DataFrameTransformer(StandardScaler()).fit_transform(df)。但注意:这个wrapper不处理 fit_predict 或 inverse_transform,有需要得单独扩展。

Pipeline里保留DataFrame?ColumnTransformer + set_params()配合用

在 ColumnTransformer 中混合数值/类别列时,输出仍是ndarray。想让整个Pipeline输出DataFrame,得两步走:

  • 每个子transformer内部用 get_feature_names_out() 获取列名
  • 最后用 pd.DataFrame(..., columns=final_cols) 组装,而 final_cols 需拼接所有分支的列名

更省事的做法是:给Pipeline结尾加一个自定义step,例如:

from sklearn.pipeline import Pipeline
from sklearn.compose import ColumnTransformer
<p>preproc = ColumnTransformer(
transformers=[
('num', StandardScaler(), ['age', 'income']),
('cat', OneHotEncoder(), ['gender', 'city'])
],
remainder='passthrough'
)</p><p>pipe = Pipeline([
('preproc', preproc),
('to_df', DataFrameTransformer(lambda x: x))  # 占位,实际在transform里重写逻辑
])
</p>

真正关键的是——别依赖Pipeline自动推导列名。所有列名拼接必须显式做,且顺序要和 ColumnTransformer 的 transformers 列表顺序严格一致,否则列对不上数据。

最常被忽略的细节:当 remainder='passthrough' 时,那些未被处理的列名不会出现在任何 get_feature_names_out() 结果里,必须手动追加到最终列名列表中。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

python

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1851

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

4964

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1789

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

29817

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3547

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3567

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1223

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

616

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2763

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习