İçeriğe geç
CANLI Dün Yerli yapay zeka İridaa, kendi modeli “Kuzey”i devreye aldı: Tahmini skorlar rakiplerine göre nerede? 6 gün önce Bu Hafta AI Model Değerlendirmesi (2026-W46) 8 Kas 2026 OpenAI Uyarı Vermeden Hesap Kapatıyor: Aylık 200 Dolarlık Pro Aboneler Bile Etkilendi 8 Kas 2026 Yapay Zekâ 18 Yıllık Kuantum Varsayımını Üç Günde Çözdü: Aaronson-Ambainis Artık Bir Teorem 8 Kas 2026 Gemini 4 Flash ve Yeni Claude İçin İşaretler Artıyor: LMArena’da ‘Hydrogen’, Sızıntıda ‘Hyperion’ Zekâ endeksi lideri Claude Opus 5 (Adaptive Reasoning, Max Effort) · 63,1 16.11.2026
Bülten

AI Yapay Zeka

LongMemEval-V2: Yapay Zeka Ajanları İçin Yeni Bellek Benchmark’ı Yayınlandı

Yapay zeka ajanlarının uzun süreli bellek sistemleri, özelleştirilmiş web ortamlarında başarılı olabilmek için kritik öneme sahip.

· 2 dk okuma · 0 yorum

Yapay zekâya sor Paylaş
Kısaca · 3 madde
  1. Yapay zeka ajanlarının uzun süreli bellek sistemleri, özelleştirilmiş web ortamlarında başarılı olabilmek için kritik öneme sahip.
  2. Mevcut Bellek Benchmark'larının Sınırlılıkları Günümüzde kullanılan ajan bellek benchmark'larının çoğu kullanıcı geçmişlerini, kısa izleri v…
  3. LongMemEval-V2: Kapsamlı Bellek Değerlendirme Çerçevesi LongMemEval-V2 (LME-V2), bellek sistemlerinin ajanların özelleştirilmiş ortamlarda d…

Yapay zeka ajanlarının uzun süreli bellek sistemleri, özelleştirilmiş web ortamlarında başarılı olabilmek için kritik öneme sahip. UCLA araştırmacıları tarafından geliştirilen LongMemEval-V2 benchmark’ı, bu alanda çığır açan bir değerlendirme çerçevesi sunuyor.

Mevcut Bellek Benchmark’larının Sınırlılıkları

Günümüzde kullanılan ajan bellek benchmark’larının çoğu kullanıcı geçmişlerini, kısa izleri veya downstream görev başarısını test ediyor. Ancak bu yaklaşım, ajanların gerçek üretim ortamlarında ihtiyaç duyduğu çevresel uzmanlığı doğrudan değerlendirmiyor. Başarı; arayüz özelliklerini hatırlamak, durum dinamiklerini takip etmek, iş akışı bilgisini özümsemek ve tekrarlayan hata modlarını öğrenmekle doğrudan ilişkili.

LongMemEval-V2: Kapsamlı Bellek Değerlendirme Çerçevesi

LongMemEval-V2 (LME-V2), bellek sistemlerinin ajanların özelleştirilmiş ortamlarda deneyimli bir meslektaş gibi uzmanlaşmasını sağlayıp sağlayamadığını değerlendirmek üzere tasarlandı. Benchmark, beş temel bellek yeteneğini kapsayan 451 manuel olarak seçilmiş soru içeriyor:

  • Statik Durum Hatırlama: Arayüz öğeleri ve kalıcı bilgiyi geri çağırma
  • Dinamik Durum Takibi: Sürekli değişen sistem durumlarını izleme
  • İş Akışı Bilgisi: Prosedürleri ve en iyi uygulamaları öğrenme
  • Çevresel Tuzaklar: Tekrarlayan hata modlarını tanıma
  • Ön Koşul Farkındalığı: Görev önkoşullarını anlama

Sorular, soru başına 500 yörünge ve 115M token’a kadar ölçeklenen geçmiş yörüngeleriyle eşleştirildi.

AgentRunbook-C Yöntemi: %72,5 Doğruluk

Araştırmacılar iki bellek yöntemi öneriyor:

AgentRunbook-R, ham durum gözlemleri, olaylar ve strateji notları için bilgi havuzları kullanan verimli bir RAG tabanlı bellek sistemidir. AgentRunbook-C ise yörüngeleri dosya olarak saklar ve bir kodlama ajanını çağırarak artırılmış bir sandbox ortamında kanıt toplar.

Deneyler, AgentRunbook-C’nin en iyi performansı elde ettiğini ortaya koyuyor: %72,5 ortalama doğruluk. Bu sonuç, en güçlü RAG baseline’ının (%48,5) ve hazır kodlama ajanı baseline’ının (%69,3) oldukça önünde.

Performans-Gecikme Dengesi

Güçlü performans kazanımlarına rağmen, kodlama ajanı tabanlı yöntemlerin yüksek gecikme maliyetleri bulunuyor. AgentRunbook-C, doğruluk-gecikme Pareto sınırını ileriye taşıyor olsa da, önemli iyileştirme alanı bulunuyor.

Yapay Zeka Ajan Bellek Sistemleri İçin Yeni Perspektif

Bu araştırma, ajan belleğini kullanıcı geçmişi yerine çevresel uzmanlık olarak yeniden çerçeveliyor. Özel bir web ortamında çalışan ajanlar için yörünge RAG’ı, masada bırakılan 24 puan anlamına geliyor.

Kaynak: arXiv:2605.12493 — DAIR.AI (@dair_ai)

Yapay zekâya sor

Haberi seçtiğiniz asistanda hazır bir soruyla açın

Şu haberi 3 maddede özetle: https://aihaber.org/yapay-zeka-ajan-bellek-sistemi-longmemeval-v2/

Gemini hazır soruyla açılamıyor: soru panonuza kopyalanır, açılan sayfada yapıştırmanız yeterli.

Paylaş
X LinkedIn WhatsApp Telegram Reddit Bluesky Threads E-posta

Bu haber işinize yaradı mı?

Yorumlar 0

Yorum yazın

Karakter: 0/1000

Henüz yorum yok. İlk yorumu siz yazın.

İlgili haberler