識別情報とアクセス
公開元のレコードでは、このリポジトリはstate-spaces/mamba-130m-hfとして識別されています。現在の公開スナップショットは1e76775f628fbf1350fbe4dbb3d971ba64af25a1です。アクセス条件は次のとおりです。公開リポジトリ。適用されるライセンスと公開元の条件を確認してください。記録されているライセンスラベルは公開レコードに記載なしです。公開リポジトリやゲート付きダウンロードは、あらゆる用途に対する許可を意味するものではありません。
設定の事実
固定された設定では、モデルタイプはmamba、アーキテクチャはMambaForCausalLMと報告されています。モデルハブではtext-generationとしてタグ付けされています。これらのラベルはリポジトリのメタデータを記述するものであり、ベンチマーク性能を確立するものではありません。
- hidden_size: 768
- intermediate_size: 1536
- num_hidden_layers: 24
- torch_dtype: float32
- vocab_size: 50280
モデル固有の補足
設定またはタグは、リカレント、ハイブリッド、または状態空間のコンポーネントを示しています。状態の扱い、シーケンス制限、バッチ処理の挙動、ランタイム実装を確認してください。Transformerのみを前提とした想定は当てはまらない可能性があります。
重みメモリの計画
本ガイドは独立に検証された論理パラメータ数を保持していないため、数値による重みメモリの見積もりを省略しています。この正確なリポジトリリビジョンについてパラメータ数が検証された場合は、重みのみの下限としてパラメータ数×パラメータあたりのバイト数を用い、KVキャッシュ、コンテキスト、アクティベーション、ランタイム、同時実行数は別途考慮してください。
リビジョンと再現性
メタデータと設定はリビジョン1e76775f628fbf1350fbe4dbb3d971ba64af25a1に固定されています。評価を再現する際はこのコミットを固定してください。リポジトリのブランチは変更される可能性があり、このソース確認はモデルの重み自体を検証するものではありません。
公開レコード
- タスク: text-generation
- モデルタイプ: mamba
- アーキテクチャ: MambaForCausalLM
- ライセンスラベル: 公開レコードに記載なし
- アクセス: 公開リポジトリ。適用されるライセンスと公開元の条件を確認してください
- リビジョン: 1e76775f628fbf1350fbe4dbb3d971ba64af25a1