Ir al contenido

Este contenido sigue en francés

La página está traducida, pero su contenido detallado todavía no. Las fichas, las guías y los catálogos se muestran en francés: preferimos darte el original antes que una traducción automática aproximada. Ver el sitio en francés

Mesurer avant d'optimiser Étape 1 sur 6
Avant de commencer
  • llama.cpp compilé, ou au minimum Ollama installé
  • Un wattmètre de prise (environ 15 €) pour la partie énergie

Les trois chiffres

ChiffreCe qu'il mesureCe qu'il détermine
pp — prompt eval (tok/s)Vitesse de lecture de la question et du contexteLe délai avant le premier mot
tg — text generation (tok/s)Vitesse de production de la réponseLe confort de lecture
W — watts à la priseConsommation réelle en chargeLe coût, l'autonomie, l'argument écologique
Le seuil du confortableEn dessous de 5 tokens par seconde, l'utilisateur attend visiblement. Entre 5 et 10, la réponse arrive à peu près à la vitesse de lecture. Au-delà de 15, la différence ne se perçoit plus.