为什么重要
MT-Bench 是早期的 80 题多轮对话基准。Arena-Hard 是其精神继承者,区分度更好。
构建方式与示例
80 题 × 2 轮。例如第一轮:“写一个排序算法”→第二轮:“改成并行版本”。
关联基准与展望
关联:Arena-Hard、Chatbot Arena。区分度已不足。
80 个多轮问题涵盖 8 个领域,由 GPT-4 自动评分,是早期对话评测的经典
MT-Bench 是早期的 80 题多轮对话基准。Arena-Hard 是其精神继承者,区分度更好。
80 题 × 2 轮。例如第一轮:“写一个排序算法”→第二轮:“改成并行版本”。
关联:Arena-Hard、Chatbot Arena。区分度已不足。