Meta AI 最近提出的语言模型 ‘ 牧羊人 ‘（Shepherd）用于评估其他模型生成的文本，并给出改进建议。该模型能够生成自然语言的反馈，识别文本中的问题并提出改进建议，在多个下游任务中表现优于其他模型。研究人员通过社区反馈和人工标注的数据集对 ‘ 牧羊人 ‘ 模型进行微调和评估，其评估结果显示其平均胜率远高于其他竞争模型。这一研究对于改进语言模型生成的可靠性非常有益。