أطلقت Amazon Web Services أداة UAEF المجانية والمفتوحة المصدر لاختبار وكلاء الذكاء الاصطناعي عبر أطر برمجية متعددة. تقيّم الأداة الوكلاء وفق 36 مقياسًا، وترصد تراجع الأداء عند تغيير التعليمات أو النماذج.
أتاحت Amazon Web Services إطارها Universal Agent Evaluation Framework (UAEF) بوصفه برمجية مفتوحة المصدر. ويقيّم استخدام الأدوات، وجودة الإجابات، والسلامة، والسرعة، والمحادثات الطويلة، والتعاون بين الوكلاء. وتُحسب بعض الدرجات مباشرة، فيما يستعين بعضها الآخر بنموذج ذكاء اصطناعي على Amazon Bedrock لتولّي التقييم.
تختلف أطر تطوير الوكلاء، مثل LangGraph وLangChain وStrands Agents وAmazon Bedrock AgentCore، في طريقة تسجيل خطوات الوكيل. ويحوّل UAEF هذه السجلات إلى صيغة موحّدة، لمعالجة الحاجة إلى إعادة بناء الاختبارات عندما تنتقل الفرق من إطار إلى آخر.
بالنسبة إلى الفرق التي تحدّث وكيل ذكاء اصطناعي، يستطيع UAEF مقارنة نتائج الاختبارات المحفوظة ورصد أي درجة تنخفض بأكثر من 5%، مع تصنيف التراجع بحسب شدّته. والبرمجية مجانية، لكن التقييم القائم على الذكاء الاصطناعي وتخزين النتائج يظلان معتمدين على خدمات AWS.
قد تقلّل صيغة الاختبار الموحّدة العمل اللازم لمقارنة الوكلاء أو الانتقال بين أطر التطوير.
اعتماد التقييم والتخزين على AWS يعني أن إتاحة البرمجية مفتوحة المصدر لا تلغي الاعتماد على الخدمات السحابية.
الإفادة بأن 12 مؤسسة تستخدم UAEF لا تثبت بعد أنه يحسّن موثوقية الوكلاء على نطاق واسع.
كتبت غرفة أخبار Made in 10 هذا المنشور آليًا من المصدر أعلاه.
أعلنت Databricks أن Genie Ontology حقق نسبة نجاح بلغت 91% في مهام ضمن مساحة العمل، مقابل 45% و58% لوكيلين من وكلاء الذكاء الاصطناعي المتقدمين. استُخدمت في الاختبار شركة افتراضية تتوزع قواعد إعداد تقاريرها بين الجداول ودفاتر العمل والمستندات.
أطلقت Databricks نسخة محدّثة من مساعدها Genie ووكلاء ذكاء اصطناعي يحلّلون بيانات الشركات باستمرار. وتفحص ميزة منفصلة باسم Ontology بيانات المؤسسة لتمكين الموظفين من استرجاع المعلومات وتحليلها.
رصدت أبحاث BloombergNEF خططًا لتوليد 181 غيغاواط من الكهرباء بالغاز داخل مواقع مراكز بيانات الذكاء الاصطناعي في الولايات المتحدة والمملكة المتحدة وأوروبا القارية. تهدف المقترحات إلى تجاوز تأخّر الربط بشبكات الكهرباء، وتقع 90% من محطات الكهرباء العاملة بالغاز المخطط لها في الولايات المتحدة.