名单文本去重·保序(快速版)

SKILL研究检索
研究检索 未标注权限 许可证不明确
安装这个技能

客户名单/通讯录/采集列表一堆重复,手动剔到吐。一键保序去重、可选忽略大小写、可选去空行,名单立刻干净。只读不出网。触发:文本去重、名单去重、去重工具、重复行、客户名单去重、通讯录去重、数据去重。

一句话选型结论

按资料字段整理

名单文本去重·保序(快速版)是研究检索类的 Agent Skill,安装方式未标注,权限级别未标注,许可证不明确,有可直接复制的安装命令。技能本质是给模型读的说明书,效果取决于模型与客户端;装完先用一个小任务验证,再放进正式流程。

分类研究检索 安装方式未标注 权限级别未标注权限 许可证许可证不明确
累计安装 未标注 本周 未标注
GitHub 星标 未标注 仓库 未标注
下载量 未标注 技能市场下载数
权限级别 未标注权限 安装前请确认风险范围
许可证 许可证不明确 未说明

安装

未标注
在支持 Skills 的客户端里执行,装完问一句「你有哪些技能」验证
skillhub install user_ad41d380/text-dedup-pro
  1. 1
    确认客户端支持

    确认你的客户端支持 Skills(Claude、Codex、Cursor 等),并升级到较新的版本。

  2. 2
    拿到技能文件

    执行上面的命令安装;也可以把仓库里的 SKILL.md 手动放进客户端的 skills 目录。

  3. 3
    刷新技能列表

    重新打开客户端,或刷新技能列表,让新放进来的技能被加载。

  4. 4
    验证是否生效

    问一句「你有哪些技能」,确认列表里出现它,再拿一个小任务试跑。

技能档案

研究检索
字段来自技能仓库与公开索引,中文说明由本站标注
作者 / 维护方user_ad41d380仓库 未标注 · 版本 未标注
宿主客户端未标注技能可被这些客户端加载
安装方式未标注安装包 community
权限级别未标注权限安装前请确认风险范围
许可证未说明许可证不明确,商用前请自行确认条款
仓库可用性available技能仓库当前是否可访问
最近核验未标注上游最后核验时间 · 数据更新 1791737014
正文体量4.0 KBSKILL.md 原文大小,越大说明说明书写得越细

典型使用场景

3 类
按分类整理的常见用法,具体以 SKILL.md 为准
查资料并整理出处

让模型按主题查资料,并把引用来源整理成清单。

网页与文献要点提炼

把长文、论文、网页压成能直接看的要点。

竞品与行业汇总

按关键词汇总竞品动态与行业信息。

选择建议

装之前先看这几条
按条目字段给出的判断,不替你决定用不用

值得选的地方

  • 有可直接复制的安装命令,不用自己翻文档找入口。

先想清楚的地方

  • 没有标注权限级别,实际能做什么要装好后确认。
  • 许可证不明确,商用或二次分发前先到仓库确认条款。
  • 没有做站内核验,内容以作者仓库为准。
  • 技能只是说明书,实际效果取决于模型与客户端,装完先用小任务试一遍。

更适合

  • 需要在研究检索场景里给模型补一套做法的人。
  • 愿意先读一遍 SKILL.md、确认它会让模型做什么的人。

不太适合

  • 对许可证要求很严、必须明确可商用的人。
  • 只想装完就自动变强、不打算看说明书的人。

同类对比

6 个同类
同分类里挑最接近的几条,字段以各自详情页为准
技能权限级别安装方式累计安装宿主客户端安装命令
名单文本去重·保序(快速版)当前 未标注权限 未标注 未标注 未标注 有
寻找技能 浏览器控制 GitHub 仓库 3120.0 万 Codex、Claude、Cursor 有
自我改进 Agent 接触敏感数据 ClawHub 市场 1646.4 万 OpenClaw 有
灵魂追踪 联网访问 GitHub 仓库 758.9 万 Codex、Claude、Cursor 有
自我完善 联网访问 ClawHub 市场 682.9 万 OpenClaw 有
微软代工厂 调用外部服务 GitHub 仓库 661.4 万 Codex、Claude、Cursor 有

SKILL.md 全文

4.0 KB
模型实际读到的说明书原文,来自技能仓库

名单文本去重·保序(快速版)

> 定位:单功能做到极致——客户名单/通讯录/采集列表一堆重复,手动剔到吐;一键保序去重、可选忽略大小写。 对标 SkillHub 高下载品类痛点(文本去重、名单去重、去重工具、重复行、客户名单去重、通讯录去重、数据去重)。
> 隐私:全部计算在本机完成,只读/不出网,数据零外传。

一、何时使用

  • 见触发关键词:文本去重、名单去重、去重工具、重复行、客户名单去重、通讯录去重、数据去重。

负向清单(本件不做):超出单点范围的批量/修改类操作 → 升级对应标准/高档件(见第五节)。

二、怎么用

python scripts/main.py list.txt        # 保序去重
python scripts/main.py list.txt --ci   # 忽略大小写去重
参数 说明
文件路径(位置) 待去重文本文件
--ci 忽略大小写判重

三、判定逻辑(纯本地规则,不出网)

逐行读入 → 默认剥首尾空白+剔除空行 → 保序去重(保留首次出现);--ci 时先大小写折叠再判重 → 按原顺序输出唯一行。纯内存处理,不出网不落盘。

四、样例(轻量档质量闸:≥2 · 1 常见 + 1 边界)

常见样例(逐字取自 _selftest/run.py 实测)——输入文件内容 a / b / a / c / (空行) → 输出恰为 a b c(保序、空行剔除、重复剔除)。

边界样例:--ci 忽略大小写——A 与 a 视为同一行(自测第 2 断言 PASS)。

> 真实场景验证:真实 automation.log 11797 行实测——awk 独立实现比对,唯一行集合全等、开关有效。验证过程与裁判方法公开可复算(靶场 _real_verify_20261011.py)。

五、升档口子(强制)

本件只做单点检测/计算。遇到更复杂场景,结果页给出升级路径:
> 升级件:csv-data-cleaner(同族·表格数据清洗快速版,支持整表去重归一);模糊去重/跨文件合并去重→升人工处理

形成「轻量快检(免费·0元引流)→ 中档/高档」的引流闭环。

六、边界(严格遵守)

  • 只读/不出网:不修改、移动、删除用户文件;无任何外部请求;
  • 不猜:结果不确定时如实标注,不强行给唯一答案;
  • 不越权:超出单点范围即升档,不硬撑。

<!--免责豁免开始-->

七、四防声明

  • 防泄露:本件无密钥、无私有数据、无后门;全部逻辑即包内脚本,无隐藏文件。
  • 防转发:本件为免费引流件,请从官方渠道获取,转发请保留本声明。
  • 防破解:纯本地实现,无鉴权绕过面;篡改重打包与本源件指纹不符。
  • 防抄袭:原创性指纹见 references/_fingerprint_evidence.md,AS-IS。

八、免责与责任(免责声明·豁免扫描区)

本工具仅提供操作辅助与流程指引,不承诺任何效果或收益;因使用本工具产生的任何直接或间接损失,责任由使用者自行承担;在法律允许的最大范围内,开发者不以任何方式承担责任(法律强制规定的责任除外)。
- 按现状(AS-IS)提供,不附带任何明示或默示保证;
- 平台规则/接口/页面变更可能导致部分功能失效,开发者无义务实时跟进;
- 输出结果仅供决策参考,重大事项(付费/合规/法律)须使用者自行复核。
<!--免责豁免结束-->

常见问题

5 问
答案由本站依据条目字段整理
名单文本去重·保序(快速版)怎么安装?

在支持 Skills 的客户端里执行:skillhub install user_ad41d380/text-dedup-pro。安装方式为未标注。装完刷新技能列表或重开客户端。

名单文本去重·保序(快速版)支持哪些客户端?

资料没有标注宿主客户端,但只要客户端支持 Skills(Claude、Codex、Cursor 等),一般都能加载。

名单文本去重·保序(快速版)权限高吗,安全吗?

权限级别为未标注权限。安装前先看它会读取或写入哪些内容。

名单文本去重·保序(快速版)收费吗?

本站不代收费用,也没有标注具体价格。是否收费取决于技能本身和所用的模型或客户端,正式使用前按作者说明确认。

名单文本去重·保序(快速版)用什么许可证?

许可证标注为 未说明(许可证不明确)。商用或二次分发前请到仓库确认条款原文。

热门专题

按场景挑技能
全部专题 →

技能内容以作者仓库为准;分类、权限级别与许可证状态的中文说明为中文整理,最近核验 未标注。