Anthropic Research · 其他
Anthropic 推出 Clio 对话分析系统
Anthropic 发布了 Clio,一套面向 Claude 会话数据的隐私保护分析框架。Clio 能在不泄露用户具体对话内容的前提下,从海量真实交互中提取使用模式的统计洞察。该系统采用差分隐私与语义聚类相结合的技术路线,兼顾组织运营的可见性与用户隐私。Anthropic 计划将 Clio 的分析能力持续开放给安全研究和产品优化团队。
- 域名
anthropic.com- 评分
- 5 · 重大发布
- 发布
- 2025-08-28
导读
Anthropic Research 推出 Clio,一套面向真实 Claude 对话的隐私保护分析系统。研究团队的出发点很直接:模型部署后到底被用来做什么,过去几乎没有系统化的观测手段,传统的 evaluation 与 red teaming 都依赖事前知道要找什么,对自下而上的模式发现帮助有限。
Clio 走的是 bottom-up 路线,把对话蒸馏成抽象的主题 cluster。整个流程由 Claude 自己执行:提取摘要、聚类、再总结成可读的 cluster 描述,全程不让人类分析师看到原始对话。privacy-first 设计有多重防御层。Claude 在抽取摘要时被指示忽略个人细节,cluster 必须达到最低用户数或会话数阈值,低频主题不会出现在结果中,再加一道 Claude 验证 cluster 摘要是否包含任何识别性信息的把关。
从 Clio 看到的真实使用模式中,教育用途占比超过 7%,商业策略与运营接近 6%。Clio 也帮安全团队识别出 Trust & Safety 既有分类器漏掉的 false negative,例如用户用翻译请求来掩盖违规内容这类场景。对读者来说,Clio 是一个反例:它示范了用户隐私与组织级安全可见性并不必然冲突,关键在于把分析全程下放给模型本身,再用阈值、defense-in-depth 来限制信息外泄。
