İçeriğe geç
CANLI 20:49 Claude artık video konferanslara katılabiliyor! Dün Yerli yapay zeka İridaa, kendi modeli “Kuzey”i devreye aldı: Tahmini skorlar rakiplerine göre nerede? 9 Kas 2026 Bu Hafta AI Model Değerlendirmesi (2026-W46) 8 Kas 2026 OpenAI Uyarı Vermeden Hesap Kapatıyor: Aylık 200 Dolarlık Pro Aboneler Bile Etkilendi 8 Kas 2026 Yapay Zekâ 18 Yıllık Kuantum Varsayımını Üç Günde Çözdü: Aaronson-Ambainis Artık Bir Teorem Zekâ endeksi lideri Claude Fable 5.2 (Max, Default Fallback) · 64,6 16.11.2026
Bülten

Teknoloji Yapay Zeka Yapay Zeka Haberleri

OpenRouter: Jev 1.13, Banking77’de Opus 5’e 3,3 puan geride ama ~13× hızlı ve ~22× ucuz

OpenRouter, TypeSafe’in sınıflandırma modeli Jev 1.13 ile Claude Opus 5’i Banking77 test setinde (3.080 müşteri destek ifadesi, 77 niyet) karşılaştırdı.

· 1 dk okuma · 0 yorum

Yapay zekâya sor Paylaş
Yönetici

Yayınlanma:

ai/muhabir · özet kısaca

OpenRouter, TypeSafe’in sınıflandırma modeli Jev 1.13 ile Claude Opus 5’i Banking77 test setinde (3.080 müşteri destek ifadesi, 77 niyet) karşılaştırdı. Sonuçlar Jev doğruluk %81,0, Opus 5 %84,4 (fark ~3,3 puan; bootstrap %95 GA 2,3–4,4). Macro-F1 %80,5’e karşı %83,6. Medyan gecikme 175 ms / … Güven skoru ile yönlendirme Jev güveni kalibre olasılık değil ama sıralama sinyali olarak işe yarıyor. Güven ≥0,90 iken trafiğin ~%76’sı Jev…

Özet yalnızca bu sayfadaki bilgilerden hazırlandı; “Yeniden yaz” aynı özeti baştan yazar.

OpenRouter, TypeSafe’in sınıflandırma modeli Jev 1.13 ile ’i Banking77 test setinde (3.080 müşteri destek ifadesi, 77 niyet) karşılaştırdı. Yazı, küçük bir yargı modelinin frontier sohbet modeli yerine ne kadar doğruluk kaybıyla maliyet ve gecikme kazandırabileceğini ölçüyor.

Sonuçlar

Jev doğruluk %81,0, Opus 5 %84,4 (fark ~3,3 puan; bootstrap %95 GA 2,3–4,4). Macro-F1 %80,5’e karşı %83,6. Medyan gecikme 175 ms / 2.266 ms (~13×). Tam koşu maliyeti $0,34 / $7,44; bin istekte $0,11 / $2,42 (Opus’ta uzun sistem istemi önbellekli). İki model örneklerin %89,3’ünde aynı etiketi vermiş.

Güven skoru ile yönlendirme

Jev güveni kalibre olasılık değil ama sıralama sinyali olarak işe yarıyor. Güven ≥0,90 iken trafiğin ~%76’sı Jev’de kalıp Opus’a eskalasyonla doğruluk Opus-only’ye 0,4 puan mesafede, maliyet ~3,5× düşük kalabiliyor. Tek veri seti / tek prompt / reasoning kapalı Opus koşulları sınır olarak not edilmiş.

Kaynak: OpenRouter — Is Jev as Accurate as Frontier Models at Classification?

Yapay zekâya sor

Haberi seçtiğiniz asistanda hazır bir soruyla açın

Şu haberi 3 maddede özetle: https://aihaber.org/openrouter-jev-vs-claude-opus-5-banking77/

Gemini hazır soruyla açılamıyor: soru panonuza kopyalanır, açılan sayfada yapıştırmanız yeterli.

Paylaş
X LinkedIn WhatsApp Telegram Reddit Bluesky Threads E-posta

Bu haber işinize yaradı mı?

Yorumlar 0

Yorum yazın

Karakter: 0/1000

Henüz yorum yok. İlk yorumu siz yazın.

İlgili haberler