OpenAI o1-mini - OpenAI o1-mini

模型详细情况和参数

OpenAI o1-mini

模型全称
OpenAI o1-mini
模型简称
OpenAI o1-mini
模型类型
推理大模型
发布日期
2024-09-12
预训练文件大小
未知
是否支持中文(中文优化)
最高支持的上下文长度
128K
模型参数数量(亿)
模型代码开源协议
不开源
预训练结果开源商用情况
不开源 - 不开源
模型GitHub链接
暂无
模型HuggingFace链接
暂无
在线演示地址
暂无
官方博客论文
OpenAI o1-mini
基础模型
无基础模型
发布机构
评测结果
评测名称 评测能力方向 评测结果
MMLU 知识问答 85.2
MMLU Pro 知识问答 80.3
HumanEval 代码生成 92.4
GPQA Diamond 常识推理 60.0
MATH-500 数学推理 90.0
AIME 2024 数学推理 63.6

OpenAI o1-mini 简介

OpenAI于2024年9月12日推出了o1-mini模型,这是一款专为STEM领域(科学、技术、工程和数学)设计的高性价比推理模型。作为o1-preview模型的经济高效替代方案,o1-mini在多个评估基准上表现出色。

主要特点:

  • STEM推理优化: o1-mini专注于需要强大推理能力的任务,特别是在数学和编程方面。在美国数学邀请赛(AIME)和Codeforces等基准测试中,o1-mini的表现几乎与o1-preview相当。
  • 成本与速度优势: o1-mini的成本比o1-preview低约80%,为需要强大推理能力但不需要广泛世界知识的应用提供了经济实惠的解决方案。此外,o1-mini具有更高的速率限制和更低的延迟,适合实时应用。

基准测试表现:

  • 数学能力: 在AIME测试中,o1-mini取得了70.0%的得分,接近o1的74.4%,远超o1-preview的44.6%。这一成绩相当于美国前500名高中生的水平。
  • 编程能力: 在Codeforces平台上,o1-mini的Elo评分达到1650,接近o1的1673,显著高于o1-preview的1258。这意味着o1-mini位于竞争性程序员的前86%。
  • STEM推理: 在MATH-500基准测试中,o1-mini在零样本链式思维提示下达到了90.0%的准确率,展现了强大的数学问题解决能力。

技术规格:

  • 上下文窗口: o1-mini支持128,000个token的输入上下文窗口,能够在单次请求中处理大量信息。
  • 输出容量: 模型每次请求最多可生成65,500个token,确保提供详细且全面的响应。

安全性与一致性:

o1-mini采用与o1-preview相同的对齐和安全技术。内部评估显示,与GPT-4o相比,o1-mini对越狱尝试的抵抗力提高了59%,确保遵守安全指南,降低生成有害内容的风险。

局限性:

尽管o1-mini在STEM相关任务中表现出色,但其世界知识范围比o1-preview等更大的模型要窄。这意味着在需要广泛事实信息的任务中,o1-mini可能不如这些更大的模型适用。

总的来说,OpenAI的o1-mini在性能和成本之间实现了良好平衡,是专注于STEM推理任务的应用的理想选择。其优化设计确保在其专业领域内高效处理任务,同时保持输出质量。

欢迎大家关注DataLearner官方微信,接受最新的AI模型和技术推送

OpenAI o1-mini所属的领域
自然语言处理

自然语言处理

Natural Language Process

35个资源

OpenAI o1-mini相关的任务