unsloth/GLM-4.7-Flash

unsloth/GLM-4.7-Flash ist auf Hugging Face als text-generation-Modell gelistet. Diese Seite dokumentiert den öffentlichen Repository-Snapshot 070169aa5fd9cf953f8a4e9e30b8dad73ec02604; überprüfen Sie die gelistete Revision, Lizenz und Laufzeitunterstützung, bevor Sie es verwenden.

Aktualisiert am

Computraq bereitet den Start vor. Diese Leitfäden erläutern die Vorbereitung und den vorgeschlagenen Rahmen; sie belegen keinen laufenden Dienst, keine Integration und keine Partnerschaft.

Identität und Zugang

Der Publisher-Eintrag identifiziert dieses Repository als unsloth/GLM-4.7-Flash. Der aktuelle öffentliche Snapshot ist 070169aa5fd9cf953f8a4e9e30b8dad73ec02604. Der Zugang ist öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen; das aufgezeichnete Lizenzlabel ist mit. Ein öffentliches Repository oder ein gated Download begründet keine Erlaubnis für jede Nutzung.

Konfigurationsfakten

Die gepinnte Konfiguration gibt Modelltyp glm4_moe_lite und Architektur Glm4MoeLiteForCausalLM an. Der Model Hub taggt es für text-generation; diese Labels beschreiben Repository-Metadaten und belegen keine Benchmark-Leistung.

  • torch_dtype: bfloat16
  • head_dim: 64
  • hidden_size: 2048
  • intermediate_size: 10240
  • max_position_embeddings: 202752
  • n_routed_experts: 64
  • num_attention_heads: 20
  • num_experts_per_tok: 4
  • num_hidden_layers: 47
  • num_key_value_heads: 20
  • rms_norm_eps: 1e-05
  • rope_parameters.rope_theta: 1000000
  • vocab_size: 154880

Modellspezifische Qualifizierung

Diese Konfiguration oder Publisher-Metadaten kennzeichnen das Modell als Mixture of Experts. Bestätigen Sie, ob die Serving-Laufzeit seine Routing-Schichten unterstützt, und unterscheiden Sie Gesamtparameter von pro Token aktiven Parametern; hier wird keine aktive Anzahl abgeleitet, sofern der Publisher nicht explizit eine angibt.

Gewichtsspeicher-Planung

Dieser Leitfaden enthält keine unabhängig verifizierte logische Parameteranzahl und lässt daher eine numerische Gewichtsspeicher-Schätzung aus. Wenn eine Anzahl für diese exakte Repository-Revision verifiziert wird, verwenden Sie Parameteranzahl × Bytes pro Parameter als Untergrenze für die Gewichte allein; berücksichtigen Sie dann separat KV-Cache, Kontext, Aktivierungen, Laufzeit und Nebenläufigkeit.

Revision und Reproduzierbarkeit

Die Metadaten und die Konfiguration sind auf Revision 070169aa5fd9cf953f8a4e9e30b8dad73ec02604 gepinnt. Pinnen Sie diesen Commit, wenn Sie eine Evaluierung reproduzieren. Repository-Branches können sich ändern, und diese Quellenprüfung validiert die Modellgewichte selbst nicht.

Veröffentlichter Eintrag

  • Task: text-generation
  • Modelltyp: glm4_moe_lite
  • Architektur: Glm4MoeLiteForCausalLM
  • Lizenzlabel: mit
  • Zugang: öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen
  • Revision: 070169aa5fd9cf953f8a4e9e30b8dad73ec02604

Quellen und Prüfung