趋近智
技术规格
注意力
注意力结构
Multi-Head Attention
注意力头
-
键值头
-
注意力头维度
-
位置嵌入
Absolute Position Embedding
RoPE Theta
-
滑动窗口注意力
-
滑动窗口大小
-
归一化
-
激活函数
-
维度
隐藏维度大小
-
层数
-
FFN 中间层大小（稠密层）
-
多 Token 预测头数
-
分词器
词汇量大小
-
o3
o3 为跨多个领域的复杂问题解决提供高级推理能力。该模型具备针对数学、编程和分析任务的深思熟虑的思考（deliberative thinking）能力。在包括竞赛编程、高等数学和科学推理在内的挑战性基准测试中表现强劲。非常适合需要严密分析和多步推理，且追求极佳性价比的应用场景。
关于 o3
OpenAI 的 o3 推理模型代表了审慎式问题解决和数学推理领域的重大突破。这些模型采用了先进的思维链（chain-of-thought）技术，并支持配置不同的计算级别（低、中、高），以实现推理深度与响应时间之间的平衡。该系列模型在复杂数学、科学推理以及多步问题求解方面表现卓越。
其他 o3 模型
- 没有相关模型
评估基准
排名
#26
| 基准 | 分数 | 排名 |
|---|---|---|
QA 助手 ProLLM QA Assistant | 0.985 | 🥇 1 |
0.81 | ⭐ 4 | |
0.794 | 14 | |
专业知识 MMLU Pro | 0.86 | 17 |
研究生级问答 GPQA | 0.833 | 17 |