如何在Pandas中跨多列动态检测关键词并生成标志列

霞舞

霞舞

2026-07-31

840人浏览

原创

如何在Pandas中跨多列动态检测关键词并生成标志列

本文介绍如何使用df.apply(axis=1)高效实现跨所有列的关键词匹配,为dataframe添加布尔标志列,避免逐列覆盖、类型错误及逻辑失效问题。

本文介绍如何使用df.apply(axis=1)高效实现跨所有列的关键词匹配,为dataframe添加布尔标志列,避免逐列覆盖、类型错误及逻辑失效问题。

在Pandas中,若需基于任意一列中是否包含指定关键词来标记整行(例如生成 flag 列),不能简单地对每列单独调用 apply 并反复赋值——这会导致前一次循环结果被后一次覆盖,最终仅保留最后一列的判断结果(如全为0)。正确做法是按行处理(axis=1),在单次遍历中检查该行所有列值是否至少有一个匹配任一关键词。

以下是推荐的实现方式:

import pandas as pd

# 构造示例数据
data = {'column1': ['sp123', 'abc', 'sp456', 'def'], 
        'column2': ['tp1234', 'abc', 'sp4256', 'def'], 
        'column3': ['syp123', 'abc', 'sp456', 'def']}
df = pd.DataFrame(data)
keywords = ['sp', 'xyz']

# ✅ 正确:按行扫描所有列,任一匹配即标记为1
df['flag'] = df.apply(
    lambda row: 1 if any(keyword in str(row[col]) 
                         for col in df.columns 
                         for keyword in keywords) 
    else 0, 
    axis=1
)

print(df)

输出结果:

viable
viable

基于GPT-4的AI非结构化数据分析平台

下载
  column1 column2 column3  flag
0   sp123  tp1234  syp123     1
1     abc     abc     abc     0
2   sp456  sp4256   sp456     1
3     def     def     def     0

关键要点说明:

  • axis=1 确保 lambda row 接收的是每行的 Series,可访问 row['column1']、row['column2'] 等;
  • str(row[col]) 强制转为字符串,避免 TypeError(如列含数字、None 或 NaN);
  • 嵌套生成器表达式 for col in df.columns for keyword in keywords 实现“行内全列 × 全关键词”的穷举匹配,any() 提供短路逻辑,高效终止;
  • 该方案时间复杂度为 O(n × m × k),其中 n 为行数、m 为列数、k 为关键词数,在中等规模数据下性能良好。

⚠️ 注意事项:

  • 若需区分大小写敏感匹配,可直接使用 keyword in str(row[col])(默认敏感);如需忽略大小写,改用 keyword.lower() in str(row[col]).lower();
  • 对于大规模数据(百万级行),建议优先考虑向量化方法(如 df.stack().str.contains(...).unstack().any(axis=1)),但语法更复杂且内存开销略高;
  • 关键词若含正则特殊字符(如 .、*),应先 re.escape(keyword),或改用 str.contains() 配合正则引擎。

综上,df.apply(..., axis=1) 是实现灵活、可读性强的跨列关键词标记的标准解法,兼顾准确性、鲁棒性与维护性。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

2025.12.04

149

15

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

2026.01.31

129

21

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

2026.04.13

69

25

墨刀AI提示词教学
墨刀AI提示词教学

本合集由PHP中文网精心整理,为您提供全面的墨刀AI提示词教学。内容涵盖高质量原型撰写公式与实操窍门,助您轻松掌握AI设计工具。无论是零基础入门还是进阶技巧,都能让您快速上手,大幅提升产品设计与协作效率。

2026.08.04

3

21

墨刀AI完整入门
墨刀AI完整入门

PHP中文网为您倾力打造墨刀AI保姆级入门指南完整版!本合集从零基础讲起,涵盖AI生成原型、提示词优化、图片转原型及多轮对话等核心功能。无论您是新手还是进阶用户,都能轻松掌握产品设计全流程。快来PHP中文网,一键解锁高效设计技巧,让想法即刻成型!

2026.08.04

1

20

墨刀AI进阶技巧
墨刀AI进阶技巧

本合集由PHP中文网精心整理,为您提供墨刀AI核心进阶策略指南。内容涵盖高效提示词写作、原型智能生成与微调、结构化导图制作及行业分析报告输出等实战技巧。助您轻松掌握AI设计工具,大幅提升产品设计与团队协作效率。

2026.08.04

3

14

火山引擎实名认证失败怎么办
火山引擎实名认证失败怎么办

火山引擎实名认证失败可能与证件信息填写错误、姓名或企业信息不一致、证件照片不清晰、营业执照状态异常、手机号验证失败或审核资料不完整有关。本专题整理个人认证、企业认证、资料上传、审核退回、重新提交和认证不通过的常见处理方法。

2026.08.04

2

10

火山引擎域名备案流程详解
火山引擎域名备案流程详解

火山引擎域名备案适合需要在火山引擎云服务器、对象存储、CDN或网站服务上绑定域名的用户参考。本专题整理备案入口、账号实名认证、备案类型选择、主体信息填写、网站信息提交、资料上传、初审核验、管局审核和备案失败排查,帮助用户完成网站上线前的备案流程。

2026.08.04

0

10

火山引擎DNS解析配置步骤
火山引擎DNS解析配置步骤

使用火山引擎DNS解析网站域名时,需要确认域名已完成管理接入,并正确配置服务器IP、CNAME地址或验证记录。本专题整理域名添加、记录类型选择、TTL设置、解析状态检查、备案和访问测试等流程,适合新手搭建网站时参考。

2026.08.04

0

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Pandas 教程
Pandas 教程

共15课时 | 1.6万人学习