Meta AI 发布 BlenderBot 3 175B 参数开源聊天机器人

Meta AI 在 2022 年 8 月发布 BlenderBot 3，是首个公开权重、参数规模达 1750 亿的对话型 AI。与之前研究项目最大的差异是 Meta 同时上线了一个公开 demo，邀请美国成年用户实时与模型对话，并把对话数据回收用于后续训练。模型权重、代码、数据集和模型卡一并对外开放，使其成为研究社区可以反复复现和检验的对话基础设施。

方法上，BlenderBot 3 把多个早期版本积累的能力整合到同一个模型：能够通过互联网搜索补充事实，能够长时记忆此前对话内容，并继承了 BlenderBot 2 的开放域对话技巧。研究团队提出了 Director 方法用于安全性训练，把分类器接入解码过程，对低质量、有毒、自相矛盾或重复性的回复打负分，相比传统语言建模、重排序、奖励学习等方案表现更好。模型采用持续学习机制，把用户在对话中标注的差评作为反馈信号，迭代修正错误。基准测试显示 BlenderBot 3 在对话技能上优于 BlenderBot 与 BlenderBot 2，但仍有 1.1% 的回复被用户标记为不正确或无意义、1.2% 被标记为偏离话题。

Meta 在博文中明确把这次发布定位为研究项目，而非面向公众的产品。开放 demo 与权重的目的，是让更广泛的社区能够分析对话数据、研究安全性策略、并在共享的基础上推进负责任的对话 AI。文章承认安全问题仍是开放课题，承诺定期更新模型快照和部署数据，邀请研究者一起参与改进。