♻️

CSV 去重

删除 CSV 中的重复行,可指定按某几列判重,清洗数据。

本地处理 · 不上传

加载工具中…

相关:csv · 去重 · 重复 · 清洗 · 数据

CSV 去重按整行或指定列去除重复记录,可选保留首次或末次出现,并显示删除了多少行。数据清洗的基础操作。

使用步骤

  1. 粘贴 CSV 数据
  2. 选择去重依据的列
  3. 选择保留策略
  4. 查看结果与删除统计

使用场景

  • 清理导出数据中的重复记录
  • 按关键字段去除重复项
  • 合并多份数据后去重
  • 检查数据中是否存在重复

小贴士

  • 按指定列去重比按整行去重更实用——同一个用户的记录可能只有时间戳不同,按用户 ID 去重才有意义。
  • 去重前应先统一格式:首尾空格、大小写差异会导致本该相同的记录被判为不同。
  • 保留首次还是末次出现,取决于业务语义。按更新时间排序后保留末次,通常能得到最新的记录。

常见问题

按整行还是按列去重?

看业务需求。按整行只能去掉完全相同的记录,而实际中重复记录往往只有关键字段相同(如用户 ID),其余字段有细微差异。按关键列去重通常更有用。

大小写不同算重复吗?

默认不算。abc 和 ABC 被视为不同。需要忽略大小写时应先统一转换再去重,同时也要注意去掉首尾空格。

保留哪一条?

取决于哪条更可信。若数据按时间排序,保留末次通常得到最新记录;若首次录入的更准确,则保留首次。做决定前最好先看看重复记录之间的差异。

CSV 去重是免费的吗?

是。本站所有工具完全免费,无需注册登录、无广告干扰,打开即用。

使用CSV 去重,我的数据安全吗?

安全。该工具在你的浏览器本地完成处理,输入内容不会上传到服务器,隐私更有保障。