Excel 去重 数据删除重复项操作详解
Excel 去重主要有删除重复项功能高级筛选 UNIQUE 函数三种主流实现方式,核心目标是把重复出现的数据保留唯一值,去掉多余重复记录,是数据清洗最常用操作,客户名单商品编码人员台账导入数据之后经常会存在重复录入,就需要做 Excel 去重处理,很多新手容易踩坑,删除重复项是直接改动原始数据源,会永久删除重复行,这个操作风险比较高,高级筛选可以把唯一值提取到新位置,不会破坏原表,UNIQUE 函数属于动态数组方式,原始数据更新之后结果会自动刷新,还要区分单列去重和多列组合去重,多列去重是几列同时匹配才算重复,不是单列单独判断,同时还要留意大小写空格隐藏字符,这些肉眼看不见的内容会让 Excel 去重判定认为两条数据不重复,导致去重失败,理解不同 Excel 去重方式的特点和风险,才能根据业务场景选择合适方案。
基础原理
Excel 去重的判定逻辑是对比单元格内容,内容完全一致就判定为重复记录,普通删除重复项默认不区分英文大小写,但是前后多余空格不可见字符会被当成不同内容,多列去重的时候是把整行多列内容组合匹配,只要其中任意一列不一样,就不会判定成重复行。
操作步骤
方法一 删除重复项 内置功能 Excel 去重
1 选中需要做 Excel 去重的数据区域,包含表头
2 切换到顶部数据选项卡,点击删除重复项按钮
3 在弹出窗口里面勾选判定重复的列,单列去重只勾选目标列,多列组合去重就勾选全部匹配列
4 点击确定,excel 自动执行 Excel 去重,弹窗提示删除了多少重复值保留多少唯一值
5 注意这个操作直接修改原表,重复行会被永久删除,操作前建议复制备份原始数据
方法二 高级筛选提取唯一值 Excel 去重
1 选中数据区域包含表头
2 数据选项卡点击高级筛选
3 选择将筛选结果复制到其他位置
4 勾选选择不重复的记录
5 指定列表区域,再设置复制到的目标空白区域
6 点击确定,唯一值会输出到新位置,原始表格不会改动,适合需要保留原数据的 Excel 去重场景
方法三 UNIQUE 函数动态 Excel 去重
新版 excel 支持动态数组,使用 UNIQUE 函数自动溢出生成唯一值
1 选中要输出结果的起始单元格
2 输入公式 =UNIQUE (A2:A100)
3 按下回车,函数自动向下溢出,输出全部唯一数据
4 如果是多列组合去重,把区域改成多列范围,例如 = UNIQUE (A2:B100)
5 原始数据新增或者修改,UNIQUE 生成的 Excel 去重结果会自动更新
方法四 辅助列标记重复 Excel 去重
不想直接删除记录,只想标记哪些是重复项,使用 COUNTIF 辅助公式
公式 =COUNTIF (A$2:A2,A2)
结果等于 1 代表第一次出现,大于 1 代表重复记录,筛选大于 1 的行就可以手动处理,适合需要人工复核的 Excel 去重场景
各类 Excel 去重方式对比表格
| 方式 | 是否修改原数据 | 是否动态更新 | 支持多列组合去重 | 适用场景 |
|---|---|---|---|---|
| 删除重复项 | 是 | 否 | 是 | 确认无误直接清理原表 |
| 高级筛选 | 否 | 否 | 是 | 提取唯一值保留原表 |
| UNIQUE 函数 | 否 | 是 | 是 | 新版 excel 动态数据清洗 |
| COUNTIF 辅助标记 | 否 | 否 | 单列为主 | 人工标记复核重复项 |
完成 Excel 去重之后,建议抽查结果,检查是否存在带空格或者隐藏字符的数据没有识别成重复,如果是旧版本 excel 没有 UNIQUE 函数,就优先选择高级筛选或者删除重复项方案,多列组合 Excel 去重一定要确认勾选的列正确,避免只按单列判断,造成整行数据误删。
【常见问题】
问题 1 Excel 去重之后为什么还有看起来一样的数据
回答 1 Excel 去重判定是内容完全匹配,肉眼相同的数据如果前后带有空格或者隐藏不可见字符,Excel 去重会判定成两条不同记录,需要先用 TRIM 清理空格之后再执行 Excel 去重。
问题 2 Excel 去重删除重复项会不会把原始数据弄丢
回答 1 删除重复项属于直接修改原表的 Excel 去重方式,重复行会永久删除,不能撤销恢复,执行 Excel 去重之前建议复制一份原始数据备份,防止误删需要的数据。
问题 3 Excel 去重 UNIQUE 函数报错是什么原因
回答 1 出现报错说明当前 excel 版本不支持动态数组,旧版本 excel 没有 UNIQUE 函数,这个 Excel 去重方式无法使用,替换成高级筛选或者删除重复项来完成 Excel 去重操作。
问题 4 Excel 去重可以多列同时判断重复吗
回答 1 可以,删除重复项和高级筛选都支持多列组合 Excel 去重,需要多列全部内容同时一致才判定为重复记录,做多列 Excel 去重的时候,要在窗口勾选对应的全部列。
【免责申明】
本文介绍的 Excel 去重相关操作基于桌面版 excel 常规版本,不同版本以及 WPS 表格功能和函数兼容可能存在细微差异,操作前建议备份原始表格文件,本文内容仅作为学习参考,不保证适配所有特殊业务场景,因自行操作产生的数据错误,相关风险由使用者自行承担。
