このモデルは画像入力を受け付け、推論にかける労力を可変にできます。完全な重みはApache 2.0ライセンスの下、来週公開される見込みです。ファインチューニングと推論は、すでにTinkerを通じて利用できます。

ARC Prizeは、ARC-AGI-2でタスクあたり0.27ドルにて81.7%、ARC-AGI-1でタスクあたり0.08ドルにて96.5%を報告し、評価したすべてのオープンウェイトモデルを上回るとしています。これらは独立した評価の結果です。安全性の改善は、チーム内の評価と、引用された外部テストに基づいています。

重要な理由

今回の公開は、オープンモデルの優れた成果と、学習中の安全性に関する挙動を監視する必要性を並べて示しています。

ガイド

試してみること

仮にモデルを評価する場合、タスクの成功だけでなく、長時間の実行における安全性違反や、失敗した復旧の試みも追跡してください。