🧹 文本去重

一键去除重复行——支持大小写敏感和排序选项

🔒 你的图片绝不会离开你的设备。 所有处理都通过 JavaScript Set-based deduplication 在浏览器本地完成。无上传、无服务器、无追踪。

功能特点

  • 智能去重 — 自动检测并移除重复行,支持大小写敏感选项。
  • 空格处理 — 可选去除首尾空格后再比较,避免因空格导致的误判。
  • 统计报告 — 显示原始行数、唯一行数和移除的重复项数量。
  • 排序输出 — 可选对去重后的结果进行排序。

使用方法

  1. 粘贴文本 — 将包含重复行的文本粘贴到输入框。
  2. 设置选项 — 根据需要选择大小写敏感、去除空格和排序等选项。
  3. 去重并导出 — 点击去重按钮,查看结果并复制或下载。

使用场景

  • 清理邮件列表中的重复地址
  • 去除数据库导出中的重复记录
  • 清理日志文件中的重复条目
  • 合并多个来源的数据并去重

常见问题

大小写敏感是什么意思?

开启后 Hello 和 hello 被视为不同的行;关闭后它们会被视为重复。

保留哪一个重复项?

保留首次出现的行,后续重复的会被移除。

相关工具

  • 🔢 字数统计 — 实时统计文本各项指标——阅读时间、朗读时间一目了然
  • 🔤 大小写转换 — 支持大写、小写、驼峰、下划线等多种格式——即时转换
  • 🔍 正则测试 — 输入正则表达式和测试字符串,实时查看匹配结果