Le modèle accepte des entrées d’images et prend en charge un effort variable. La publication des poids complets est prévue pour la semaine prochaine sous licence Apache 2.0 ; le réglage fin et l’inférence sont déjà disponibles via Tinker.

ARC Prize fait état de 81,7 % sur ARC-AGI-2 à 0,27 $ par tâche et de 96,5 % sur ARC-AGI-1 à 0,08 $ par tâche, affirmant que le modèle surpasse tous les modèles à poids ouverts qu’il a évalués. Il s’agit de résultats d’évaluations indépendantes ; les améliorations de sécurité reposent sur les évaluations internes de l’équipe et sur des tests externes cités.

Pourquoi c’est important

Cette sortie associe de solides résultats pour un modèle ouvert à la nécessité de surveiller les comportements en matière de sécurité pendant l’entraînement.

GUIDES

Quelque chose à essayer

À titre hypothétique, si vous évaluez un modèle, suivez les violations de sécurité et les tentatives de récupération échouées lors de longues exécutions, ainsi que la réussite des tâches.