ApX 标志

趋近智

GPT-OSS 20B

活跃参数

21B

上下文长度

128K

模态

Text

架构

Mixture of Experts (MoE)

许可证

Apache 2.0

发布日期

5 Aug 2025

知识截止

Jun 2024

技术规格

专家参数总数

3.6B

专家数量

32

活跃专家

4

注意力结构

Multi-Head Attention

隐藏维度大小

-

层数

24

注意力头

64

键值头

8

激活函数

SwigLU

归一化

-

位置嵌入

Absolute Position Embedding

系统要求

不同量化方法和上下文大小的显存要求

GPT-OSS 20B

GPT-OSS 20B is a text-based language model developed by OpenAI, engineered for efficient operation on consumer-grade hardware, including desktops and laptops with constrained memory resources. It functions as a versatile instrument for a range of natural language processing tasks, with a particular emphasis on capabilities requiring robust reasoning and integration with external tools. This model is a component of the broader GPT-OSS family, which aims to provide powerful AI capabilities in an accessible and deployable format, facilitating both local and enterprise-specific applications.

关于 GPT-OSS

Open-weight language models from OpenAI.


其他 GPT-OSS 模型

评估基准

排名适用于本地LLM。

排名

#16

基准分数排名

0.8

🥈

2

排名

排名

#16

编程排名

#6

GPU 要求

完整计算器

选择模型权重的量化方法

上下文大小:1024 个令牌

1k
63k
125k

所需显存:

推荐 GPU