Jev a une semaine et trente et une reproductions ouvertes
Une semaine après la sortie de Jev, Victor Mustar, de Hugging Face, en compte trente et une reproductions ouvertes. Son collègue Apolinário Passos publie le Decision Index 0.1 pour les départager : chaque reproduction et Jev passent 37 bancs d'essai, soit 132 422 questions, sans troncature, sans ajustement des invites, une question sans réponse comptant pour fausse. Jev tient la tête, à 59,5.
La plus rapide des copies a été bâtie en une nuit : l'auteur de Laya dit avoir mis quinze heures entre l'entraînement et la mise en ligne du modèle. Portée depuis sur CoreML, avec 99,5 % des opérations sur le moteur neuronal d'Apple, elle décide en 3,7 millisecondes sur un M5 Pro.
OpenRouter dit ce que la catégorie a déplacé : les modèles les plus touchés sont « les versions flash, chez beaucoup de laboratoires » — et près de la moitié des utilisateurs de Jev sur la passerelle « n'avaient touché aucun modèle la semaine précédente ».
Simon Willison retient ce que la catégorie retire : « mettez-y tout le texte que vous voulez, la seule chose qui revient est un nombre à virgule flottante », lequel « peut dissimuler toutes sortes de biais invisibles ». Sur les villes de la baie de San Francisco, son propre essai place Cupertino en tête et East Palo Alto en dernier.
Sur le même sujet : Microsoft publie Decision-1, un modèle de décision bâti sur Qwen, OpenAI ouvre une API de décisions, le terrain de Jev, Un essaim d'agents entraîne en un week-end le meilleur Jev ouvert.