返回评测
对齐与安全 安全-有害内容 未饱和 模态 · 文本 任务 · 分类

Machiavelli

在文字冒险游戏中评测 AI agent 的道德行为

UC Berkeley ·

考察能力

道德推理 目标-伦理平衡 行为对齐

构建信息

数据规模
134 个游戏场景
评测方式
多维行为分析
核心指标
Ethical Score / Reward

模型效果排行

🥇 GPT-4o
varies
🥈 Claude 3.5 Sonnet
varies

为什么重要

Machiavelli 通过文字冒险游戏场景评测 AI agent 在追求目标时是否会采取不道德行为(如欺骗、操控、伤害)。是 AI 行为对齐研究的创新范式。

评测设计

Agent 在 134 个 Choose Your Own Adventure 游戏中做决策,系统追踪其道德行为(权力寻求、欺骗、暴力等)和任务完成的平衡。

AI安全 道德推理 agent 行为对齐