必须在建模前完成去重验证:检查「数据预处理」开关是否开启,未开启则手动启用;可通过「查重分析」技能或自然语言指令定位重复;最后导出_clean.csv并以此为源生成看板。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

在超级麦吉AI中做数据分析时,原始数据里混入重复记录会导致统计偏差、图表失真、趋势误判,比如同一客户被重复计入销售额,或同一会议纪要被两次转写后拉高关键词频次。必须在建模或生成看板前完成去重验证。
确认数据源是否已启用自动去重
进入「AI数据分析」模块 → 点击右上角「设置」齿轮图标 → 查看「数据预处理」开关状态。
若开关为关闭状态,系统不会自动剔除重复行,所有后续分析都将基于含重复项的原始表运行。这一步必须手动开启,否则后续所有操作都建立在污染数据之上。
开启后,系统会在上传Excel或连接数据库时自动执行全字段比对去重,并在任务日志中标注“已过滤X条重复记录”。
手动触发重复记录扫描与定位
方法一:使用内置「查重分析」技能
在数据集详情页 → 点击「更多操作」→ 选择「查重分析」→ 系统弹出字段选择面板。
【必须勾选业务主键字段(如订单ID、会议时间+参会人姓名组合)】,否则默认按整行比对,可能把合法的多笔相同金额交易误判为重复。
扫描完成后,页面顶部显示红色警示条:“共发现17处逻辑重复”,点击可展开明细表格,每条重复组右侧带「标记为有效」「合并为一条」「全部删除」三按钮。
方法二:用自然语言指令调用数字员工
在对话框输入:“请检查sales_2026_q3.xlsx中customer_id和order_date组合是否唯一,列出所有重复组合及对应行号。”
系统将返回结构化结果,含重复组合值、首次出现行号、重复次数、所在sheet页名。该指令支持跨sheet比对,但不支持跨文件比对。
验证去重效果并锁定最终版本
第一步:在数据看板编辑界面,点击左侧面板「数据预览」→ 切换至「行数统计」标签页。
第二步:对比「原始行数」与「去重后行数」数值差值,若差值为0,说明无重复;若差值>0,点击「查看差异明细」按钮。
第三步:在弹出窗口中,选择「仅显示去重保留的首行」→ 点击右上角「导出当前视图」→ 命名为「sales_2026_q3_clean.csv」。
注意:导出动作会生成新文件,但不会覆盖原文件。原文件仍保留在云盘中,可随时回溯。
第四步:在新建分析任务中,选择刚导出的_clean.csv作为数据源,此时所有图表、BI看板、自动报告均基于已清洗数据生成。











