C'est vrai que le cas d'usage est basique ! Pour précision, j'ai réalisé ce test via OpenWebUI avec Ollama.
C'est clair qu'avec un outil comme OpenCode, les résultats auraient été probablement plus pertinents. En réalité, mon idée initiale était surtout de tester les deux plus grosses variantes de Gemma 4 pour voir comment elles se comportaient côte à côte, et j'en ai profité pour confronter les autres modèles que j'ai déjà en local sur ma machine. Je ne prévoyais même pas de publier ce test à la base.
Je suis tout à fait d'accord avec toi : tester une approche plus "agentique" avec un prompt bien spécifique aurait certainement donné un bien meilleur résultat. Ça donne de bonnes pistes pour un prochain comparatif !
Malheureusement, je n'aurai pas le temps de m'y replonger pour le moment.
[^] # Re: Cas d'usage
Posté par Ecran Plat (site web personnel) . En réponse au journal Comparatif : 6 LLMs locaux face à un exercice Python simple. Évalué à 2.
C'est vrai que le cas d'usage est basique ! Pour précision, j'ai réalisé ce test via OpenWebUI avec Ollama.
C'est clair qu'avec un outil comme OpenCode, les résultats auraient été probablement plus pertinents. En réalité, mon idée initiale était surtout de tester les deux plus grosses variantes de Gemma 4 pour voir comment elles se comportaient côte à côte, et j'en ai profité pour confronter les autres modèles que j'ai déjà en local sur ma machine. Je ne prévoyais même pas de publier ce test à la base.
Je suis tout à fait d'accord avec toi : tester une approche plus "agentique" avec un prompt bien spécifique aurait certainement donné un bien meilleur résultat. Ça donne de bonnes pistes pour un prochain comparatif !
Malheureusement, je n'aurai pas le temps de m'y replonger pour le moment.