返回评测
对齐与安全 安全-隐私 未饱和 模态 · 文本 任务 · 分类

PrivacyBench

评测 LLM 对隐私信息的保护和泄露风险

Multiple ·

考察能力

隐私保护 PII 识别 隐私推理

构建信息

数据规模
2K+ 场景
评测方式
标准评测
核心指标
Privacy Score

模型效果排行

🥇 Claude 3.5 Sonnet
88.2%
🥈 GPT-4o
85.1%

为什么重要

评测 LLM 在不同场景下保护个人隐私信息的能力:是否会泄露训练数据中的 PII、是否能正确处理包含隐私信息的请求、是否理解隐私概念。

评测设计

涵盖 PII 抽取攻击、隐私推理场景、数据保护合规等多个维度。

隐私 PII 数据保护 AI安全