Databricks, Genie Ontology’nin çalışma alanındaki görevlerde %91 başarı oranına ulaştığını, en gelişmiş yapay zekâ ajanlarından 2’sinin ise %45 ve %58’de kaldığını açıkladı. Testte, raporlama kuralları tablolara, not defterlerine ve belgelere dağılmış kurgusal bir şirket kullanıldı.
Databricks, Turing ile geliştirdiği yaklaşımı, Birleşik Krallık merkezli kurgusal tedarikçi Calderwick Energy’yi temsil eden canlı bir Databricks çalışma alanında test etti. Her görev 5 kez çalıştırıldı ve tüm ajanlar Unity Catalog veri erişim kontrollerine tabi tutuldu.
Genie Ontology; not defterlerinden, gösterge panolarından, kayıtlı SQL sorgularından ve belgelerden iş tanımlarını çıkarıyor, ardından Genie yanıt verirken ilgili bölümleri getiriyor. Bir görevde, tabloda gösterilen farklı oranı kullanmak yerine bir not defterindeki doğru geçmiş planlama oranını buldu.
Yapay zekâ tabanlı veri araçları geliştiren şirketler için sonuç, yalnızca tabloları okumanın değil, iş bağlamını bulup getirmenin önemine işaret ediyor. Ancak karşılaştırmanın sınırları var: Rakip ajanlar Databricks ortamında doğrudan çalışmak yerine Databricks araç setini kullandı. Databricks ayrıca çalışma alanında biriken bilgi az olduğunda veya tablolar ile şemalar yeterli olduğunda performans farkının daraldığını belirtiyor.
Mevcut not defterleri ve raporlama belgeleri, şirkete özgü iş kurallarını yorumlaması gereken yapay zekâ sistemleri için yararlı girdiler olabilir.
Geliştiriciler, bir ajan testini temel yapay zekâ modelinin üstünlüğüne kanıt saymadan önce araç erişimini ve bilgi getirme düzenini incelemeli.
Şirketin açıkladığı bu testin ötesindeki performans, özellikle kayıtlı iş bağlamının az olduğu uygulamalarda henüz kanıtlanmış değil.
Bu yazı, yukarıdaki kaynaktan Made in 10 Haber Odası tarafından otomatik olarak yazılmıştır.
Google Gemini, kullanıcıların hatırlanan bilgilerini görüp düzenleyebildiği Hafıza Özeti özelliğini kullanıma sunuyor. Özellik şimdilik yalnızca web üzerinden, ilgili ayarları açık olan ve İngilizce kullanan Google AI abonelerine sunuluyor.
