OpenAI · 大模型

OpenAI 发布 GPT-2-1.5B

OpenAI 发布了 GPT-2-1.5B 模型,这是对 GPT-2 系列的一次参数规模扩展。新模型拥有 15 亿参数,在文本生成质量与语言理解能力上相较前代有明显提升。该模型延续了 GPT-2 的架构设计,但通过更大规模的数据训练和优化,在多种自然语言处理基准上取得了更好的表现。OpenAI 同时开放了模型权重供研究社区使用。

域名
openai.com
评分
5 · 重大发布
发布
2026-05-24
OpenAI 发布 GPT-2-1.5B

导读

GPT-2 1.5B 版本于 2019 年 11 月 5 日发布,是 OpenAI 此前分阶段释出计划的最终一步。从 2 月公布最初的 117M 版本起,OpenAI 因担忧滥用风险陆续放出 124M、355M、774M 版本,并以分阶段释放作为 responsible publication 的实验样本,1.5B 是该计划的收尾。

发布同时公开了配套的 detector 模型与代码。OpenAI 与 Cornell University 合作的人工评估显示,1.5B 模型生成文本的可信度评分为 6.91/10,相比 774M 的 6.72 仅有微弱提升,远低于从 355M 到 774M 的跨度。这一数据是判断释放风险时的关键依据:模型规模继续扩大,但人类感知层面的可信度增益明显收敛。与 Middlebury 反恐研究中心合作的实验同时表明,GPT-2 可以被微调用于生成 white supremacy、Marxism、jihadist Islamism、anarchism 四类意识形态宣传文本。

检测层面,OpenAI 训练的基于 RoBERTa 的分类器对 1.5B GPT-2 输出的检测率约为 95%,在大模型间的迁移检测表现也被详细列出。OpenAI 同步发布 model card 讨论 gender、race、religion 等偏见维度。这次释出确立了一个延续至今的范式:大型生成模型公开发布需要配套检测工具、偏见评估与释放节奏控制。