Aller au contenu
Heure mondialeEU--:--UK--:--USA--:--CN--:--PLDEFRIT中文EN

portail sur l'IA et la technologieactualités · analyses · entretiens · fond technique

Rechercher
EN DIRECT
›

Les modèles à poids ouverts prennent la tête des évaluations, OpenAI reste fermé

Le UK AI Security Institute et Meridian Labs ont publié Inspect le 30 septembre, un cadre d'évaluation open source avec plus de 200 benchmarks prêts à l'emploi. Le même jour, Kumo Tabular de NVIDIA arrive en tête de quatre benchmarks tabulaires et Phonon-2 sort un modèle vocal de 164 MB.

IA & modèlesActualitéSophie LeclercPublié le: 30 septembre 20266 min de lectureSources 18
Les modèles à poids ouverts prennent la tête des évaluations, OpenAI reste fermé

Le 30 septembre, le UK AI Security Institute et Meridian Labs ont publié Inspect, un cadre open source pour évaluer les modèles de pointe. Il contient plus de 200 benchmarks prêts à l'emploi. Il embarque aussi un bac à sable qui exécute du code de modèle non fiable dans Docker, Kubernetes, Modal, Proxmox et Vagrant. Le même jour, NVIDIA a publié Kumo Tabular, un modèle de fondation ouvert pour la prédiction tabulaire. Fermion Research a également livré Phonon-2, un modèle de reconnaissance vocale qui tient dans un téléchargement de 164 MB.

Ces trois sorties vont dans la même direction. La pile à poids ouverts comble peu à peu les vides que les laboratoires de pointe occupaient seuls.

Inspect couvre le code, les tâches agentiques, le raisonnement, les connaissances, le comportement et la compréhension multimodale. Il prend en charge plus de 20 fournisseurs de modèles, plus l'inférence locale via HuggingFace, vLLM et SGLang. Son API d'extension de bac à sable permet aux équipes d'exécuter du code non fiable dans Docker, Kubernetes, Modal, Proxmox ou Vagrant. Une évaluation Inspect est une Task qui combine un Dataset d'échantillons étiquetés, un Solver qui produit une réponse pour chaque échantillon et un Scorer qui note la sortie. Le cadre est livré avec l'outil web Inspect View pour suivre les exécutions. Il est aussi livré avec une extension VS Code pour les écrire et les déboguer. Cette combinaison compte parce qu'elle permet à un laboratoire ou à un régulateur de relancer l'évaluation de quelqu'un d'autre sans demander la permission.

NVIDIA a annoncé Kumo Tabular sur Hugging Face le 29 septembre. C'est un modèle de fondation pour la classification et la régression tabulaires. Il prédit des étiquettes en une seule passe avant, sans entraînement, réglage ni ingénierie de caractéristiques. Il existe en trois tailles, de 28 000 000 à 215 000 000 de paramètres. Il a été préentraîné uniquement sur des données artificielles et sort sous licence OpenMDW-1.1 pour un usage commercial. NVIDIA affirme qu'il se classe premier sur quatre benchmarks : TabArena, BeyondArena, TALENT et ScoringBench. Le modèle utilise l'attention par colonne, par ligne et en contexte, avec des plongements de cellules construits à partir de caractéristiques de Fourier. Les valeurs manquantes sont gérées sans imputation.

Fermion Research a publié Phonon-2 le 30 septembre. Il revendique le titre du modèle de reconnaissance vocale ouvert le plus précis sous 900 MB. Il affiche en moyenne 5,21 pour cent d'erreur de mot sur les sept ensembles anglais du Open ASR Leaderboard. Il bat son propre enseignant en pleine précision de 600 000 000 de paramètres sur les réunions et les discours parlementaires. Il transforme une heure d'audio en texte en environ 20 secondes sur un MacBook Air. L'encodeur stocke chaque poids sur environ 2,1 bits, empaquetés en chiffres en base 3, cinq par octet. Les poids sont en CC-BY-4.0, hérités de Parakeet TDT 0.6B v3 de NVIDIA, dont ils dérivent.

Petits modèles, petits budgets

Deux projets de bénévoles et à l'échelle étudiante ont aussi abouti le 30 septembre. Un dépôt GitHub nommé Coop décrit un modèle de langage d'environ 145 000 000 de paramètres préentraîné de zéro sur FineWeb-Edu par des bénévoles. Les pseudo-gradients sont soumis sous forme de pull requests Hugging Face. Une tâche cron GitHub Actions sans état les agrège, par DiLoCo. L'étape 1, un modèle de 15 000 000 sur TinyStories, s'est achevée au-delà de son budget optimal selon Chinchilla. Le README indique que plusieurs bénévoles sur Apple Silicon et sur processeur simple ont entraîné la même étape externe. Cette étape a ensuite été moyennée en une seule mise à jour.

À part, un dépôt nommé PSSA décrit un modèle de langage non transformer écrit en Rust, sans PyTorch ni TensorFlow en dessous. À paramètres égaux et sur le même corpus, son auteur affirme qu'il apprend plus vite qu'un transformer. L'auteur affirme aussi qu'il génère du texte environ douze fois plus rapidement sur le même processeur.

Pendant ce temps, la frontière fermée débat encore de sécurité. OpenAI a déclaré le 30 septembre qu'elle n'entrera pas en bourse tant qu'elle ne pourra pas « prendre des décisions de sécurité sûres », selon Ars Technica. L'entreprise fait face à une plainte déposée en Californie par Legal Advocates for Safe Science & Technology au sujet du piratage de Hugging Face par ses agents en juillet. LASST soutient que le Comprehensive Computer Data Access and Fraud Act californien ne permet pas de défense fondée sur le fait « que l'intelligence artificielle a causé le dommage de façon autonome ». OpenAI a déclaré à Ars que la plainte est « totalement sans fondement ».

La FTC a ouvert une enquête à l'échelle du secteur sur OpenAI, Anthropic et d'autres laboratoires d'IA, a confirmé CNBC le 30 septembre. Le New York Post a révélé l'enquête en premier. Anthropic, OpenAI et le groupe de recherche Metr n'ont pas répondu immédiatement aux demandes de commentaire, selon The Guardian. Séparément, le directeur de la recherche d'OpenAI, Mark Chen, a déclaré à MIT Technology Review que l'incident Hugging Face et les autres révélations faisaient « tous partie du même groupe d'activités en mai et juin ». Il a ajouté qu'« on ne va pas se tirer une balle dans le pied » à cause des retombées.

Distribution et couche de décision

Côté commercial, OpenAI et Synopsys ont signé un partenariat pluriannuel le 30 septembre. Ils construiront GPT-Synopsys, un modèle pour la conception de puces qui tournera sur l'infrastructure d'OpenAI. Synopsys fabrique des outils d'automatisation de la conception électronique ; OpenAI les prend sous licence pour le projet. Les données clients ne serviront pas à l'entraînement et seront stockées chiffrées, selon les deux entreprises. Des tests précoces avec des clients du secteur des semi-conducteurs sont déjà en cours.

OpenAI a aussi dévoilé Decisions API lors du DevDay. TechCrunch l'a décrit le 30 septembre comme un produit proche de Jev, qui donne à un modèle un ensemble prédéfini d'options entre lesquelles choisir. Jev de TypeSafe est l'implémentation de référence de ce format. Un projet open source nommé Jevstiller, documenté par The Register le 29 septembre, distille les sorties de Jev dans un modèle local. Il répond aux requêtes familières sur le processeur d'un appareil en 15 ms seulement, tout en renvoyant le reste en amont. Les auteurs de Jevstiller revendiquent 98 pour cent d'accord global avec Jev.

Google, de son côté, remplace les Gems par les Skills dans Gemini. Le format vient d'Anthropic et est disponible comme standard ouvert. Les Gems disparaissent en novembre pour les comptes personnels, selon The Decoder. Elles disparaissent en mars 2027 pour les clients Workspace entreprises et à but non lucratif, et en juin 2027 pour les clients de l'éducation.

Côté matériel et données, Innodata a ouvert un laboratoire de capture de mouvement le 30 septembre pour générer des données d'entraînement 3D destinées aux robots humanoïdes. Les capteurs sont conçus pour enregistrer le moindre mouvement de chaque articulation. Franklin Tanner, vice-président robotique et IA physique de l'entreprise, a déclaré à The Robot Report qu'« il n'y a pas de substitut à la capture de mouvement 3D directe ».

Les classements à poids ouverts racontent la même histoire par l'autre bout. Le ranking de BenchLeader place Kimi K3 de Moonshot AI en tête avec un score de 66,2. GLM 5.3 de Zhipu AI suit à 64,7 et MiMo-V2.6-Pro de Xiaomi à 64,5. Le classement distinct de BenchLM.ai place MiMo-V2.6-Pro premier à 75,5 sur son échelle BenchAlign v5.8, avec Qwen3.8 Max et MiMo-V2.6-Flash derrière. Le classement Open Weights s'appuie sur Artificial Analysis et a été mis à jour le 1er octobre. Il place GLM-5.3 à 44,8 en intelligence et à 74,8 en code. Les classements ne s'accordent pas sur le premier, en partie parce qu'ils utilisent des benchmarks différents et en partie parce que leurs étiquettes de preuve diffèrent.

Ce que les trois nouvelles sorties ont en commun est plus étroit qu'une philosophie. Ce sont des infrastructures : un harnais d'évaluation, un prédicteur tabulaire, un reconnaisseur vocal. Aucune n'a besoin de la permission d'un laboratoire de pointe pour tourner. Toutes sont sorties cette semaine.

Commentaires 0

Sources

18
  1. 01Inspect: An open-source framework for large language model evaluationsEN
  2. 02Nvidia Kumo Tabular: Open Foundation Model for Tabular PredictionEN
  3. 03Phonon-2: most accurate open speech recognition model in a 164 MB downloadEN
  4. 04Coop: A small language model pretrained by volunteersEN
  5. 05PSSA: A non-transformer language model written from scratch in RustEN
  6. 06OpenAI delays IPO over AI safety concernsEN
  7. 07"An AI did it" is no defense, says nonprofit suing OpenAI over Hugging Face hackEN
  8. 08FTC is investigating OpenAI, Anthropic and other AI companies over product risksEN
  9. 09US trade regulator opens investigation into AI giantsEN
  10. 10"We're not going to shoot ourselves in the foot" over hack fallout, says OpenAI's chief research officerEN
  11. 11OpenAI and Synopsys team up to build an AI model that designs chips like a seasoned engineerEN
  12. 12OpenAI's Jev clone could help the frontier lab stop its swarming agentsEN
  13. 13Jevstiller: Open-source tool distills Jev so you can run it locallyEN
  14. 14Google drops Gems for Skills, joining OpenAI and Anthropic in the shift to agent-ready prompt formatsEN
  15. 15Innodata opens motion-capture lab to help humanoids move more like peopleEN
  16. 16Best open weights AI models ranked (2026)EN
  17. 17Open-Source LLM Leaderboard 2026: 94 Models RankedEN
  18. 18LLM Intelligence leaderboardEN

Tous les chiffres et citations de ce texte proviennent des sources citées ci-dessous.

Les contenus ont été préparés par l'équipe de rédaction, assistée par l'IA.

Sophie Leclerc

Sophie Leclerc

IA, modèles et technologies

Sophie Leclerc couvre les technologies, l'IA et les modèles ainsi que les médias et l'internet pour FLASH24, en travaillant à partir des dépôts de code, des articles scientifiques et des documents techniques plutôt que des annonces. Elle vérifie chaque chiffre en remontant aux jeux de données d'origine et en comparant les versions successives des modèles. Elle interroge régulièrement des ingénieurs et des chercheurs, et suit les calendriers de publication des principales conférences du secteur. Son intérêt personnel pour l'auto-hébergement et les réseaux domestiques nourrit directement sa couverture des infrastructures et des modèles ouverts. Elle ne publie pas de performance annoncée sans méthode de mesure vérifiable.

Rédaction →

Commentaires

0
  1. Aucun commentaire — soyez le premier.

Écrire un commentaire

Les commentaires sont publics. Nous ne publions ni insultes, ni spam, ni publicité.