Model, verilen seçenekler arasından seçim yapıp olasılık dağılımı sunuyor; araç seçimi ve niyet sınıflandırmasında öne çıkarken açık uçlu akıl yürütme ve bazı diğer testlerde zayıf kalıyor.

Apache-2.0 lisanslı model BF16 ağırlıklarla sunuluyor. Uygulamaya özel kalibrasyon, puanlar önemli kararları etkilemeden önce gerekli.

Neden önemli?

Sabit seçenekli yönlendirme ve sınıflandırma sistemlerine yönelik bir arayüz sunuyor; bildirilen kıyaslama puanları bağımsız doğrulama olarak değerlendirilmemeli.

REHBERLER

Bir deneme fikri

Varsayımsal bir prototipte, sınırlı bir etiket kümesi için olasılık dağılımının mevcut bir sınıflandırıcıya kıyasla nasıl değerlendirileceğini planlayın.