J'ai pas de benchmarks fiables (en existe-t-il ?) mais j'ai une question de programmation que je pose régulièrement aux LLM.
Aujourd'hui la réponse d'un GPT5.2 est bluffante bien que comportant des fautes. Gemini est un chouillat en dessous mais je n'ai pas accès à la v3. Je n'ai pas essayé les modèles d'Anthropic car je n'ai pas de compte.
Je l'ai posé au modèle libertai/light et j'ai bien rigolé : "attention c'est un malware" :)
Par contre libertai/megamind est largement au niveau de GPT5.2 si ce n'est même un tout petit peu plus pertinent.
Partant de là, je lui ai aussi fait faire un portage d'un parser écrit en python vers javascript. Et pareil, il s'en sort très bien.
Je dirai donc en première approximation que c'est largement utilisable pour coder.
[^] # Re: Quelques questions
Posté par steph1978 . En réponse au journal Vos agents IA dépendent d’entreprises américaines, et ça devrait vous poser problème. Évalué à 2.
J'ai pas de benchmarks fiables (en existe-t-il ?) mais j'ai une question de programmation que je pose régulièrement aux LLM.
Aujourd'hui la réponse d'un GPT5.2 est bluffante bien que comportant des fautes. Gemini est un chouillat en dessous mais je n'ai pas accès à la v3. Je n'ai pas essayé les modèles d'Anthropic car je n'ai pas de compte.
Je l'ai posé au modèle libertai/light et j'ai bien rigolé : "attention c'est un malware" :)
Par contre libertai/megamind est largement au niveau de GPT5.2 si ce n'est même un tout petit peu plus pertinent.
Partant de là, je lui ai aussi fait faire un portage d'un parser écrit en python vers javascript. Et pareil, il s'en sort très bien.
Je dirai donc en première approximation que c'est largement utilisable pour coder.