Accueil›Modèles›muse-glimmer-30b

Fiche de modèle

muse-glimmer-30b

Architecture dense52 CouchesLicence apache-2.0Contexte maximal 128kVocabulaire 202.048

Voir 3 vidéos

En Q4_K_M, c’est un fichier de 15,61 Gio, et il tient sur 12 des 18 machines que nous mesurons (celle qui a le moins de mémoire : Mac avec M4 Pro et 24 Go). Ici, c’est le fichier qui remplit la mémoire : même à son contexte maximal de 128k tokens, le contexte ajoute 1,70 Gio — et le même contenu demande en français 1,28 fois autant de tokens qu’en anglais (en allemand, 1,30 fois).

En un coup d’œil
Taille en Q4_K_M15,61 GiB
Mémoire de contexte à 8k0,18 GiB
Tient sur12 / 18
Coût de l’allemand×1,30
Plus petite machine qui l’accepteMac avec M4 Pro et 24 Go
15,61 GiB

Taille du modèle en Q4_K_M

Mesuré par Local AI Scope

0,18 GiB

Mémoire de contexte à 8k tokens

Mesuré par Local AI Scope

×1,30

Ce que coûte l’allemand face à l’anglais

Mesuré par Local AI Scope

Vidéos

Vidéos : muse-glimmer-30b 3

Les meilleures démonstrations que nous avons trouvées. Appuyez et la vidéo s’ouvre ici.

Les vidéos sont sur YouTube et rien ne se charge depuis YouTube tant que vous n’appuyez pas (mode sans cookies). La miniature est servie par nous.

Tailles

Tailles des fichiers publiés

Ce sont les tailles des fichiers réellement publiés par son auteur, additionnées lorsque le modèle est livré en plusieurs parties. Pas une estimation à partir du nombre de paramètres.

Taille du fichier publié pour chaque compression
Compression Taille du modèle
Q4_K_M 15,61 GiB

Ce modèle lit aussi les images. Il lui faut pour cela un second fichier, le projecteur de vision (mmproj-Muse-Glimmer-30B-Q4_K_M.gguf, 1,30 Gio), publié à côté du modèle et non compté dans les chiffres de cette page : ils ne comptent que le texte. Si vous comptez lui envoyer des images, ajoutez-le à la taille du modèle.

Contexte

Mémoire de contexte

Calculée à partir du schéma d’attention que ce modèle déclare couche par couche, et non de la formule générique. C’est pourquoi le chiffre est souvent bien inférieur à celui d’autres calculateurs.

  • 8k tokens → 0,18 GiB
  • 32k tokens → 0,48 GiB
  • 128k tokens → 1,70 GiB
Langues

Ce qu’il coûte dans chaque langue

Mesuré en exécutant le tokenizer de ce modèle sur le même contenu dans quatre langues. Les tokens sont ce que l’on paie en contexte, en mémoire et sur la facture du cloud.

Coût en tokens par type de texte et par langue, l’anglais servant de référence
Type de texte EN ES FR DE
Code — ×1,19 ×1,32 ×1,40
Contrats — ×1,13 ×1,23 ×1,26
Courriels d’entreprise — ×1,13 ×1,21 ×1,23
Tickets d’assistance — ×1,21 ×1,37 ×1,26

L’anglais est la référence : chaque chiffre indique combien de fois plus de tokens coûte le même contenu dans cette langue. Moyenne sur tout le corpus: DE ×1,30.

Machines

Où il tient

Tenir signifie que le modèle, sa mémoire de contexte et la marge de travail tiennent au contexte indiqué, en laissant au système sa part. 12 sur les 18 machines testées (Q4_K_M, 8k tokens).

Les 18 machines testées, avec la mémoire que chacune laisse et le plus grand contexte que ce modèle y tient
Machine Tient Mémoire restante Plus grand contexte qui tient
PC avec RTX 4060 8 Go non 7,20 GiB —
PC avec RTX 3060 12 Go non 11,20 GiB —
PC avec RTX 4070 12 Go non 11,20 GiB —
Mac avec M4 et 16 Go unifiés non 13,00 GiB —
Portable de bureau, processeur seul, 16 Go non 13,00 GiB —
Mac mini avec M6 et 16 Go unifiés non 13,00 GiB —
Mac avec M4 Pro et 24 Go oui 21,00 GiB 128k
Station de travail avec RTX 4090 24 Go oui 23,20 GiB 128k
Mini-PC avec NPU et 32 Go LPDDR5X oui 29,00 GiB 128k
Mac mini avec M6 et 32 Go unifiés oui 29,00 GiB 128k
Serveur avec 2× RTX 3090 (48 Go) oui 47,20 GiB 128k
Mac avec M4 Max et 64 Go oui 61,00 GiB 128k
Mac mini avec M5 Pro et 64 Go unifiés oui 61,00 GiB 128k
Xiaomi AI Cube, 80 Go — prototype d’ingénierie oui 77,00 GiB 128k
PC avec Ryzen AI Max+ 395 et 128 Go unifiés oui 96,00 GiB 128k
Mac Studio avec M5 Max et 128 Go unifiés oui 125,00 GiB 128k
PC avec Ryzen AI Max+ PRO 495 et 192 Go unifiés oui 160,00 GiB 128k
Mac Studio avec M5 Ultra et 512 Go unifiés oui 509,00 GiB 128k

Avant de cliquer sur télécharger : au 7 octobre 2026, tous les programmes de notre liste prennent en charge ce modèle. llama.cpp l’ouvre depuis la compilation b10353, et toutes les versions stables parues depuis l’intègrent (le 16 octobre 2026, la dernière était la v0.7.0, du 15 octobre 2026) ; Ollama, depuis la 0.32.8 ; LM Studio le propose dans son propre catalogue, qui demande au moins 26 Go de mémoire système, et mlx-lm l’ouvre depuis la 0.32.0, pour le texte seulement. vLLM le prend en charge depuis la 0.28.0, mais il lui faut les poids d’origine en BF16 (55,46 Gio) dans la mémoire de la carte graphique : aucun PC de notre liste équipé d’une carte graphique n’a autant de VRAM, et sur Mac vLLM ne tourne que sur le CPU, à titre expérimental. Le tableau ne compte que le texte. Pour lui envoyer des images, il faut aussi charger le projecteur de vision (1,30 Gio), et le modèle brouillon DFlash, facultatif, qui accélère les réponses, ajoute 1,52 Gio ; Ollama charge le projecteur à chaque fois, même pour le texte. Avec l’un des deux, le Mac avec M4 Pro et 24 Go (21,00 Gio de mémoire unifiée pour le modèle) atteint 64k tokens de contexte au lieu de 128k, et avec les deux, 32k. La RTX 4090 de 24 Go (23,20 Gio de VRAM) atteint 128k avec les deux selon notre calcul, mais avec seulement 0,07 Gio de marge, trop peu pour s’y fier ; à 64k, il lui reste 2,08 Gio.