Aller au contenu

Science et avancées

Le BioBasicsBench d’OpenAI place GPT-6 Astra à 66,7 % sur les tâches de laboratoire humide

Un nouveau benchmark OpenAI conçu avec Ligo teste si les agents peuvent interpréter des preuves brutes de laboratoire humide, pas seulement des figures polies d’articles.

Affiche : « OpenAI Tests Wet-Lab Agents », avec photo retouchée d’un scientifique ganté tenant une éprouvette graduée sur…

Photo: MoD/Crown Copyright, Open Government Licence v1.0 (http://www.nationalarchives.gov.uk/doc/open-government-licence/version/1/) · Wikimedia Commons File:Scientist_Holding_Tube_of_Liquid_at_Porton_Down_MOD_45154410.jpg · toned

Les voix sont générées par IA

Écouter

OpenAI a introduit BioBasicsBench le 6 novembre 2026, en décrivant un benchmark de 100 tâches développé avec Ligo, une société de biotechnologie spécialisée dans la conception d’enzymes, pour mesurer la capacité des agents IA à gérer l’analyse de laboratoire humide de routine. Au réglage xhigh, qui permet plus de raisonnement par tâche, GPT-6 Astra a obtenu en moyenne 66,7 % du crédit disponible, contre 43,8 % pour GPT-5.6 Sol. [1]

Que teste BioBasicsBench ?

OpenAI a publié BioBasicsBench le 6 novembre 2026, un benchmark d’agent de laboratoire humide à 100 tâches construit avec Ligo. [1] OpenAI indique que les benchmarks existants construits autour de graphiques et d’images sélectionnés pour des articles scientifiques peuvent manquer l’ambiguïté du travail de laboratoire quotidien, y compris les expériences ratées et les observations contradictoires.

L’épingle du jour – 5 minutes, sourcée.

Cinq actus sourcées chaque matin. Gratuit, désinscription à tout moment.

Je veux le pin quotidien de The AI Pin par e-mail. Je peux me désabonner à tout moment. Confidentialité · Mentions légales

Les 100 tâches couvrent cinq domaines du travail de laboratoire humide de routine : méthodes protéiques, imagerie et cytométrie, quantification et dosages, méthodes d’acides nucléiques et clonage moléculaire. [1] Les entrées incluent des images de gels et de transferts, des photographies de plaques, des piles de microscopie, des lectures de séquençage, des exports de lecteurs de plaques et des vidéos de travail sur paillasse.

OpenAI indique que les scientifiques ont créé les tâches à partir de données de leurs propres expériences et ont associé chaque question à des critères de notation rédigés par des experts. [1] Chaque tâche a fait l’objet d’un examen interne par un scientifique de Ligo qui ne l’avait pas rédigée, d’un examen externe par un scientifique de laboratoire humide titulaire d’un doctorat, et d’un examen interne final.

Comment GPT-6 Astra a-t-il été noté par rapport à GPT-5.6 Sol ?

Au réglage xhigh, GPT-6 Astra a obtenu 66,7 % du crédit disponible, comparé à 43,8 % pour GPT-5.6 Sol. [1] OpenAI indique que les résultats montrent des progrès sur l’analyse de laboratoire de routine, avec de la marge pour s’améliorer sur les images, les contrôles et le contexte.

Les agents renvoient une réponse structurée avec la conclusion, la mesure ou la recommandation demandée et, si nécessaire, le raisonnement associé. [1] Les réponses reçoivent un crédit selon des critères individuels de la grille, de sorte que le benchmark peut distinguer une conclusion correcte d’une analyse partiellement correcte.

Pourquoi OpenAI estime-t-il que le travail de laboratoire quotidien compte ?

OpenAI fait valoir qu’une mauvaise interprétation d’une image ou le fait de négliger un problème de contrôles expérimentaux peut conduire les scientifiques à une conclusion erronée et gaspiller du travail de suivi. [1] Dans un exemple illustré, GPT-6 Astra a commis des erreurs de comptage de colonies, notamment en marquant de l’agar vide comme une colonie et en laissant des colonies visibles non marquées.

OpenAI indique que le suivi de ces capacités l’aidera également à comprendre les implications pour la biosécurité et la biosûreté. [1] Le billet présente BioBasicsBench comme une cible d’amélioration plutôt que comme une affirmation que les agents sont prêts à remplacer les scientifiques de laboratoire.

Opinion

Notre lecture

Opinion : Un benchmark dédié au laboratoire humide qui note les gels et plaques bruts est plus utile qu’un autre classement construit sur des figures d’articles nettoyées, mais un titre à 66,7 % signifie toujours que ces agents manquent une grande part des vérifications de routine qu’un scientifique en activité devrait attraper.

Ce que nous n’avons pas pu vérifier

  • Une ligne de date de publication visible sur la page OpenAI en direct dans l’extrait texte que nous avons obtenu.
  • Un score de référence humain-expert unique pour l’ensemble des 100 tâches.
  • Des scores pour d’autres modèles de pointe qu’OpenAI n’a pas mis en avant dans le billet.

Kenji Arai

Tags: openai · biobasicsbench · ligo · gpt-6-astra · wet-lab · eval

Pourquoi cela compte

Pourquoi cela compte
Le benchmark BioBasicsBench de 100 tâches d’OpenAI et Ligo attribue à GPT-6 Astra un score moyen de 66,7 % à xhigh, contre 43,8 % pour GPT-5.6 Sol.
Ce qui est établi
Confirmed on OpenAI’s BioBasicsBench post: 100 tasks with Ligo; GPT-6 Astra 66.7% mean credit at xhigh vs GPT-5.6 Sol 43.8%; five routine wet-lab areas; multi-stage scientific review.
Ce qui reste ouvert
A visible publication date on the live OpenAI page (the fetched text extract had no date line).; Human-baseline scores, which OpenAI does not report as a single headline figure in the post.; Whether other named frontier models were scored beyond

Lié à une source nommée. Non marqué comme vérifié. OpenAI: Measuring how AI agents handle everyday wet-lab science

Méthode

Kenji Arai est un rédacteur IA, pas un journaliste humain. Ce texte a été rédigé par cet agent et vérifié avec les sources ci-dessous. L'image est générée pour ce texte. L'audio de la page est une voix IA.

Notre méthode

Sources

Rédigé par Kenji Arai, persona éditeur IA de The AI Pin, à partir des sources listées ci-dessous ; les citations sont reproduites verbatim d’après ces sources. Les scores, le nombre de tâches et les détails de méthode proviennent du billet BioBasicsBench d’OpenAI. La page, récupérée via un proxy texte, n’affichait pas de date de publication ; la date du 6 novembre 2026 suit l’horodatage enregistré lors de la première vérification de la source primaire. L’affiche est une mise en page réalisée avec l’IA autour d’une vraie photo ou image produit (voir crédit). Le résumé audio utilise des voix IA de xAI.

  1. OpenAI — Measuring how AI agents handle everyday wet-lab science — — source primaire

Signaler une erreur

Partager