Architecture lue sur unsloth/Llama-3.2-1B-Instruct, le dépôt officiel demandant d'accepter une licence. Le fichier y est identique.
Mémoire installée
Le processeur et le GPU se partagent cette mémoire.
03 QuantificationEnviron 4,9 bits par paramètre dans un fichier GGUF.
04 Contexte8 192tokens
Entrée + réponse. Le modèle accepte 131 072 tokens au maximum.
05 Requêtes en parallèleUne seule conversation à la fois dans presque tous les cas.