unsloth/gpt-oss-20b-BF16

unsloth/gpt-oss-20b-BF16 ist auf Hugging Face als text-generation-Modell gelistet. Diese Seite dokumentiert den öffentlichen Repository-Snapshot 5a6fe4c0c1a86147cb9dc1bb99486e61d12a3c9e; überprüfen Sie die gelistete Revision, Lizenz und Laufzeitunterstützung, bevor Sie es verwenden.

Aktualisiert am

Computraq bereitet den Start vor. Diese Leitfäden erläutern die Vorbereitung und den vorgeschlagenen Rahmen; sie belegen keinen laufenden Dienst, keine Integration und keine Partnerschaft.

Identität und Zugang

Der Publisher-Eintrag identifiziert dieses Repository als unsloth/gpt-oss-20b-BF16. Der aktuelle öffentliche Snapshot ist 5a6fe4c0c1a86147cb9dc1bb99486e61d12a3c9e. Der Zugang ist öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen; das aufgezeichnete Lizenzlabel ist apache-2.0. Ein öffentliches Repository oder ein gated Download begründet keine Erlaubnis für jede Nutzung.

Konfigurationsfakten

Die gepinnte Konfiguration gibt Modelltyp gpt_oss und Architektur GptOssForCausalLM an. Der Model Hub taggt es für text-generation; diese Labels beschreiben Repository-Metadaten und belegen keine Benchmark-Leistung.

  • head_dim: 64
  • hidden_size: 2880
  • intermediate_size: 2880
  • max_position_embeddings: 131072
  • num_attention_heads: 64
  • num_experts_per_tok: 4
  • num_hidden_layers: 24
  • num_key_value_heads: 8
  • num_local_experts: 32
  • rms_norm_eps: 1e-05
  • rope_theta: 150000
  • sliding_window: 128
  • torch_dtype: bfloat16
  • vocab_size: 201088

Modellspezifische Qualifizierung

Diese Konfiguration oder Publisher-Metadaten kennzeichnen das Modell als Mixture of Experts. Bestätigen Sie, ob die Serving-Laufzeit seine Routing-Schichten unterstützt, und unterscheiden Sie Gesamtparameter von pro Token aktiven Parametern; hier wird keine aktive Anzahl abgeleitet, sofern der Publisher nicht explizit eine angibt.

Gewichtsspeicher-Planung

Dieser Leitfaden enthält keine unabhängig verifizierte logische Parameteranzahl und lässt daher eine numerische Gewichtsspeicher-Schätzung aus. Wenn eine Anzahl für diese exakte Repository-Revision verifiziert wird, verwenden Sie Parameteranzahl × Bytes pro Parameter als Untergrenze für die Gewichte allein; berücksichtigen Sie dann separat KV-Cache, Kontext, Aktivierungen, Laufzeit und Nebenläufigkeit.

Revision und Reproduzierbarkeit

Die Metadaten und die Konfiguration sind auf Revision 5a6fe4c0c1a86147cb9dc1bb99486e61d12a3c9e gepinnt. Pinnen Sie diesen Commit, wenn Sie eine Evaluierung reproduzieren. Repository-Branches können sich ändern, und diese Quellenprüfung validiert die Modellgewichte selbst nicht.

Veröffentlichter Eintrag

  • Task: text-generation
  • Modelltyp: gpt_oss
  • Architektur: GptOssForCausalLM
  • Lizenzlabel: apache-2.0
  • Zugang: öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen
  • Revision: 5a6fe4c0c1a86147cb9dc1bb99486e61d12a3c9e

Quellen und Prüfung