Identität und Zugang
Der Publisher-Eintrag identifiziert dieses Repository als unsloth/GLM-4.7-Flash. Der aktuelle öffentliche Snapshot ist 070169aa5fd9cf953f8a4e9e30b8dad73ec02604. Der Zugang ist öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen; das aufgezeichnete Lizenzlabel ist mit. Ein öffentliches Repository oder ein gated Download begründet keine Erlaubnis für jede Nutzung.
Konfigurationsfakten
Die gepinnte Konfiguration gibt Modelltyp glm4_moe_lite und Architektur Glm4MoeLiteForCausalLM an. Der Model Hub taggt es für text-generation; diese Labels beschreiben Repository-Metadaten und belegen keine Benchmark-Leistung.
- torch_dtype: bfloat16
- head_dim: 64
- hidden_size: 2048
- intermediate_size: 10240
- max_position_embeddings: 202752
- n_routed_experts: 64
- num_attention_heads: 20
- num_experts_per_tok: 4
- num_hidden_layers: 47
- num_key_value_heads: 20
- rms_norm_eps: 1e-05
- rope_parameters.rope_theta: 1000000
- vocab_size: 154880
Modellspezifische Qualifizierung
Diese Konfiguration oder Publisher-Metadaten kennzeichnen das Modell als Mixture of Experts. Bestätigen Sie, ob die Serving-Laufzeit seine Routing-Schichten unterstützt, und unterscheiden Sie Gesamtparameter von pro Token aktiven Parametern; hier wird keine aktive Anzahl abgeleitet, sofern der Publisher nicht explizit eine angibt.
Gewichtsspeicher-Planung
Dieser Leitfaden enthält keine unabhängig verifizierte logische Parameteranzahl und lässt daher eine numerische Gewichtsspeicher-Schätzung aus. Wenn eine Anzahl für diese exakte Repository-Revision verifiziert wird, verwenden Sie Parameteranzahl × Bytes pro Parameter als Untergrenze für die Gewichte allein; berücksichtigen Sie dann separat KV-Cache, Kontext, Aktivierungen, Laufzeit und Nebenläufigkeit.
Revision und Reproduzierbarkeit
Die Metadaten und die Konfiguration sind auf Revision 070169aa5fd9cf953f8a4e9e30b8dad73ec02604 gepinnt. Pinnen Sie diesen Commit, wenn Sie eine Evaluierung reproduzieren. Repository-Branches können sich ändern, und diese Quellenprüfung validiert die Modellgewichte selbst nicht.
Veröffentlichter Eintrag
- Task: text-generation
- Modelltyp: glm4_moe_lite
- Architektur: Glm4MoeLiteForCausalLM
- Lizenzlabel: mit
- Zugang: öffentliches Repository; prüfen Sie die anwendbare Lizenz und die Publisher-Bedingungen
- Revision: 070169aa5fd9cf953f8a4e9e30b8dad73ec02604