作者说
我们最近开源了“裁判大模型”PandaLM。当前大模型的评测一般都是依赖OpenAI API或者人工评测，然而，OpenAI API可能面临数据泄露问题(三星员工使用chatgpt导致代码泄露)和不可复现的问题(OpenAI的模型变更细节不公开，相同测试数据在不同的时间可能会获得不同的结果)；人工标注又十分费时费力和昂贵，很难利用人工可靠地评测大量数据。
为了解决以上两个问题，我们训练了专门用于评估的大模型PandaLM，其旨在为不同的大型语言模型(LLMs)提供可复现和自动化的评估，训练细节可在开源库中找到。通过给PandaLM相同的上下文，它可以比较不同LLMs的应答哪个更好，并提供决策的原因和可供参考的应答。PandaLM的目标受众可能是具有机密数据的组织和预算有限的研究实验室。
这些组织可能不想将其数据披露给第三方，或者可能无法承担使用第三方API导致的数据泄露或雇用人工标注者的高成本。使用PandaLM可以进行可靠，廉价，以及可重复的大规模大模型验证。为了展示PandaLM的可靠性，我们提供了一个可靠（测试集数据保证三个标注员两两之间IAA>0.85），多样化(涵盖多个任务)的人工标注测试数据集，其数据量在1k左右。其中上下文和标签都是由人类创建的。在这个测试数据集上，PandaLM-7B已经达到了94％ ChatGPT的大模型评测准确率。
代码和测试数据：
https://github.com/WeOpenML/PandaLM
论文背景
1、在大模型微调或者增强预训练中使用了不同的基座和参数，根据观察到的样例效果，模型的表现在不同场景下各有优劣，如何确定在实际应用中使用哪个模型？
2、使用 ChatGPT 对模型输出进行评估，但是 ChatGPT 对相同输入在不同时间得到的评估结果不同，到底采用哪个评估结果？
3、采用人工标注对模型生成结果进行评测耗时费力，在经费预算有限和时间紧迫的情况下，如何加速评估过程并降低成本？
4、在处理机密数据时，不管用 ChatGPT/GPT4 还是标注公司进行模型评测都面临数据泄露问题，如何保证数据安全？
基于这些问题，来自北京大学、西湖大学等机构的研究者联合提出了一种全新的大模型评估范式——PandaLM。PandaLM 通过训练一个专门用于评估的大模型，对大模型能力进行自动化且可复现的测试验证。PandaLM 于 4 月 30 日在 GitHub 上发布，是全球首个评估大模型的大模型。
GitHub地址：https://github.com/WeOpenML/PandaLM
PandaLM 旨在通过训练使得大模型学习到人类对不同大模型生成文本的总体偏好，并作出基于偏好的相对评价，以替代人工或基于 API 的评价方式，降本增效。PandaLM 的权重完全公开，可以在消费级硬件上运行，硬件门槛低。PandaLM 的评估结果可靠，完全可复现，并且能够保护数据安全，评估过程均可本地完成，非常适合学术界和需要保密数据的单位使用。使用 PandaLM 非常简单，只需三行代码即可调用。
为验证 PandaLM 的评估能力，PandaLM 团队邀请了三位专业标注员对不同大模型的输出进行独立的优劣判断，并构建了包含 50 个领域、1000 个样本的多样化测试集。在此测试集上，PandaLM 的准确率达到了 ChatGPT 94% 的水平，且 PandaLM 产生了和人工标注相同的模型优劣结论。
PandaLM介绍
目前，主要有两种方式来评估大型模型：
（1）通过调用第三方公司的 API 接口；
（2）雇用专家进行人工标注。
将数据传送给第三方公司可能导致类似三星员工泄露代码的数据泄露问题 [1]；而雇佣专家标注大量数据既耗时又昂贵。一个亟待解决的问题是：如何实现保护隐私、可靠、可复现及廉价的大模型评估？
为了克服这两个评估方法的局限，该研究开发了 PandaLM，一个专门用于评估大型模型性能的裁判模型，并提供简便的接口，用户只需三行代码便可调用 PandaLM 实现隐私保护、可靠、可重复且经济的大型模型评估。关于 PandaLM 的训练细节，请参见开源项目。
为了验证 PandaLM 在评估大型模型方面的能力，研究团队构建了一个包含约 1,000 个样本的多样化人工标注测试集，其上下文和标签均由人类生成。在测试数据集上，PandaLM-7B 在准确度达到了 ChatGPT（gpt-3.5-turbo）的 94% 的水平。
PandaLM 的特点
PandaLM 的特点包括可复现性、自动化、隐私保护、低成本及高评估水平等。
1. 可复现性：由于 PandaLM 的权重是公开的，即使语言模型输出存在随机性，但在固定随机种子后，PandaLM 的评估结果仍会保持一致。而依赖在线 API 的评估手段由于更新不透明，其评估结果在不同时间可能不一致，且随着模型迭代，API 中的旧版模型可能无法再访问，因此基于在线 API 的评测往往不具有可复现性。
2. 自动化、隐私保护与低成本：用户只需在本地部署 PandaLM 模型，调用现成命令即可评估各类大模型，无需像雇佣专家那样需保持实时沟通且担心数据泄露问题。同时，PandaLM 整个评估过程中不涉及任何 API 费用以及劳务费用，非常廉价。
3. 评估水平：为验证 PandaLM 的可靠性，该研究雇佣了三名专家独立完成重复标注，创建了一个人工标注测试集。该测试集包含 50 个不同场景，每个场景下还包含多个任务。这个测试集是多样化、可靠且与人类对文本的偏好相一致的。测试集中的每个样本由指令与上下文，以及两个由不同大模型生成的回应组成，并由人类来比较这两个回应的质量。
该研究剔除了标注员间差异较大的样本，确保每个标注者在最终测试集上的 IAA（Inter Annotator Agreement）接近 0.85。需要注意的是，PandaLM 训练集与该研究创建的人工标注测试集完全无重叠。
这些被过滤的样本需要额外的知识或难以获取的信息来辅助判断，这使得人类也难以对它们进行准确标注。经过筛选的测试集包含 1000 个样本，而原始未经过滤的测试集包含 2500 个样本。测试集的分布为 {0：105，1：422，2：472}，其中，0 表示两个回应质量相似；1 表示回应 1 更好；2 表示回应 2 更好。
以人类测试集为基准，PandaLM 与 gpt-3.5-turbo 的性能对比如下：
可以看到，PandaLM-7B 在准确度上已经达到了 gpt-3.5-turbo 94% 的水平，而在精确率，召回率，F1 分数上，PandaLM-7B 已于 gpt-3.5-turbo 相差无几。可以说，PandaLM-7B 已经具备了与 gpt-3.5-turbo 相当的大模型评估能力。
除了在测试集上的准确度，精确率，召回率，F1 分数之外，该研究还提供了 5 个大小相近且开源的大模型之间比较的结果。该研究首先使用了相同的训练数据对这个 5 个模型进行指令微调，接着用人类，gpt-3.5-turbo，PandaLM 对这 5 个模型分别进行两两比较。下表中第一行第一个元组（72，28，11）表示有 72 个 LLaMA-7B 的回应比 Bloom-7B 的好，有 28 个 LLaMA-7B 的回应比 Bloom-7B 的差，两个模型有 11 个回应质量相似。因此在这个例子中，人类认为 LLaMA-7B 优于 Bloom-7B。下面三张表的结果说明人类，gpt-3.5-turbo 与 PandaLM-7B 对于各个模型之间优劣关系的判断完全一致。
基于以上三张表，该研究生成了模型优劣的偏序图，这个偏序图构成了全序关系，可以表示为：LLaMA-7B > Bloom-7B > Pythia-6.9B > OPT-7B > Cerebras-GPT-6.7B。
PandaLM 为大模型评估提供了一种除人类评估与 第三方 API 之外的第三种选择。PandaLM 不仅具有高评估水平，而且结果具备可复现性，评估流程高度自动化，同时保护隐私且成本较低。研究团队相信 PandaLM 将推动学术界和工业界对大模型的研究，使更多人从大模型的发展中受益。
欢迎大家关注 PandaLM 项目：更多的训练、测试细节、相关文章及后续工作都会公布在项目网址：https://github.com/WeOpenML/PandaLM
智源社区社群
内容中包含的图片若涉及版权问题，请及时与我们联系删除
评论
沙发等你来抢