Artificial Analysis lance des benchmarks IA spécifiques à l'industrie ; Claude Fable 5 mène, GLM-5.2 défie les modèles closed-source

Artificial Analysis a lancé six indices de performance spécifiques à l’industrie pour évaluer les applications métiers réelles dans les domaines de la finance, du droit, de la santé, des opérations, de l’ingénierie et de l’économie, selon un suivi de Beating. Contrairement aux benchmarks généralistes traditionnels qui s’appuient sur des ensembles de données académiques, les nouveaux indices utilisent des pondérations personnalisées basées sur les classifications d’activités professionnelles O*NET pour simuler la répartition réelle des tâches dans chaque secteur. Lors des premiers tests, Claude Fable 5 a dominé les huit indices, tandis que le modèle open-source GLM-5.2 a décroché la première place dans cinq des six indices sectoriels et obtenu un score de 53 dans l’indice d’ingénierie, se rapprochant du 55 de Claude Sonnet 5. Les indices révèlent des écarts de performance importants : dans le benchmark juridique, Gemini 3.1 Pro Preview a égalé la précision de Claude Fable 5 à 11 points d’écart tout en étant 7 fois plus rapide.
Avertissement : Les informations figurant sur cette page peuvent provenir de sources tierces et sont fournies à titre indicatif uniquement. Elles ne reflètent pas les points de vue ou opinions de Gate et ne constituent pas un conseil financier, d’investissement ou juridique. Le trading des actifs virtuels comporte des risques élevés. Veuillez ne pas vous fonder uniquement sur les informations de cette page pour prendre vos décisions. Pour en savoir plus, consultez l’avertissement.
Commentaire
0/400
Aucun commentaire