مختبر موثوقية الوكلاء بالعربية من Bayanat Labs
مختبر موثوقية الوكلاء بالعربية أداة تعمل محليًا لاختبار وكلاء الذكاء الاصطناعي العاملين بالعربية في بيئة تجارة اصطناعية، وتقيّم استدعاءاتهم للأدوات والحالة النهائية للنظام، لا مدى اكتمال الإجابة في ظاهرها. وهو نسخة تجريبية من المنهجية: الشيفرة بترخيص Apache-2.0، والسيناريوهات المفتوحة وإيصالات الأدلة المنشورة بترخيص CC BY 4.0.
| الترخيص | Apache-2.0 للشيفرة، وCC BY 4.0 للسيناريوهات المفتوحة والإيصالات |
|---|---|
| الإصدار | v0.2.0 · الأداة والسيناريوهات المفتوحة v0.2.0، وإيصالات الأدلة المنشورة v0.1 (نسخة تجريبية من المنهجية). |
| تاريخ النشر | |
| آخر تحديث | |
| لمن هذا الإصدار | الفرق التي تبني وكلاء يعملون بالعربية ويستخدمون الأدوات وتحتاج إلى التحقق مما فعله الوكيل فعلًا، لا مما قاله. |
| المستوى | متقدم |
أرقام رئيسية
تُحسب آليًا من الملفات المنشورة. لا يوجد ملف MANIFEST.json لهذا الإصدار لأنه سبق البرنامج المفتوح. يُحسب كل رقم من ملف الإيصالات المنشور ويُربط بقيمة SHA-256 الخاصة به.
التنزيل والمعرّفات
| المكان | المحتوى |
|---|---|
| GitHub | الشيفرة على GitHub |
| bayanatlabs.com | إيصالات الأدلة (JSON) |
| bayanatlabs.com | قيمة التحقق للإيصالات (SHA-256) |
| Zenodo | أرشيف Zenodo (كل الإصدارات) 10.5281/zenodo.23355782 |
ابدأ الاستخدام
شغّله محليًا
# Python 3.12 and uv; the rule agent needs no model
git clone https://github.com/Bayanat-Labs/arabic-agent-reliability-lab
cd arabic-agent-reliability-lab
uv sync --extra dev
uv run barl benchmark --agent ruleما الذي يتضمنه الإصدار
| الجزء | الترخيص | ضمن الإصدار |
|---|---|---|
| شيفرة الأداة ووثائقها | Apache-2.0 | نعم |
| السيناريوهات الاصطناعية المفتوحة (scenarios/open/) | CC BY 4.0 | نعم |
| إيصالات الأدلة v0.1 للنسخة التجريبية (receipts.json وقيمة التحقق) | CC BY 4.0 | نعم |
| مواد التقييم المحجوبة والسجلات الخام والتعليمات الخاصة | غير منشورة. | لا |
صيغة النسبة: Arabic Agent Reliability Lab by Bayanat Labs. https://www.bayanatlabs.com/research/arabic-agent-reliability
الاستخدامات المقصودة
- تقييم الوكلاء الذين يعملون بالعربية ويستخدمون الأدوات من خلال استدعاءاتهم للأدوات والحالة النهائية، لا من خلال طلاقة الإجابة.
- فحص إيصالات الأدلة المنشورة والتحقق منها مقابل معرّفات التشغيل المُفصَح عنها وقيمة التحقق.
- تشغيل الأداة على نماذجك المحلية، مع الفصل بين نتائج وضع الصلاحيات الدنيا ووضع مجموعة الأدوات الكاملة.
خارج النطاق
- لوحة ترتيب أو تصنيف للنماذج أو حكم عام على الذكاء الاصطناعي العربي.
- شهادة أو معدل سلامة أو ادعاء بالجاهزية للإنتاج.
- استنتاجات عن اللهجات: لم تخضع التعليمات المكتوبة بغير الفصحى لمراجعة متحدثين أصليين للهجة نفسها.
- ادعاءات عن مقاومة حقن التعليمات (prompt injection).
الحقوق باختصار
التدريب والعرض وإعادة التوزيع وإنشاء الأصوات الاصطناعية أذونات منفصلة.
| الاستخدام | الحالة | ملاحظة |
|---|---|---|
| التدريب | مسموح | السيناريوهات المفتوحة والإيصالات بترخيص CC BY 4.0 مع نسبتها إلى المصدر. لا تُنشر المواد المحجوبة. |
| العرض | مسموح | مع نسبتها إلى المصدر وفق CC BY 4.0. |
| إعادة التوزيع | مسموح | الشيفرة بترخيص Apache-2.0، والسيناريوهات المفتوحة والإيصالات بترخيص CC BY 4.0. اسم Bayanat Labs وشعارها غير مرخّصين. |
| الصوت الاصطناعي | لا ينطبق | لا يتضمن صوتًا. |
القيود
- جميع الحالات اصطناعية، وهي حالات تطوير مفتوحة في بيئة تجارية تجريبية واحدة، ولا تثبت الأداء في بيئة الإنتاج.
- تستخدم الإيصالات المنشورة العربية الفصحى فقط.
- التكرارات بإعدادات ثابتة تكرارات تشخيصية، وليست دليلًا مستقلًا على الموثوقية العامة.
- تصف الدرجات إعدادات النظام كاملًا، لا النموذج الأساسي وحده.
- الترجمات الإنجليزية أدوات مساعدة تحريرية، وليست ترجمات معتمدة.
المصادر والتراخيص
لا بيانات من أطراف ثالثة. السيناريوهات والإيصالات اصطناعية وتصف نشاطًا تجاريًا خياليًا. وتذكر الإيصالات النماذج المختبرة بإصداراتها وقيم التجزئة الخاصة بها. تفاصيل المصادر (بالإنجليزية)
النتائج التي نذكرها
نسخة تجريبية من منهجية لتقييم الوكلاء العاملين بالعربية بناءً على الحالة النهائية، في بيئة اختبار اصطناعية مفتوحة (21 عائلة سير عمل) مع إيصالات أدلة. "الإجابة الطليقة ليست معاملة مكتملة." (بتاريخ 5 أكتوبر 2026; انظر سجل الادعاءات (بالإنجليزية))
طريقة الاستشهاد
صيغة الاستشهاد:
Bayanat Labs (2026). Arabic Agent Reliability Lab (v0.2.0) [Software]. Zenodo. https://doi.org/10.5281/zenodo.23355783
- معرّف DOI الجامع (لكل الإصدارات): 10.5281/zenodo.23355782
- معرّف DOI لهذا الإصدار: 10.5281/zenodo.23355783
- ملف CITATION.cff
@software{bayanat2026agentlab,
author = {{Bayanat Labs}},
title = {Arabic Agent Reliability Lab},
version = {v0.2.0},
year = {2026},
month = oct,
publisher = {Zenodo},
doi = {10.5281/zenodo.23355783},
url = {https://doi.org/10.5281/zenodo.23355783}
}
كيف نتعامل مع الاستشهاد (بالإنجليزية)
سجل التغييرات
| التاريخ | الإصدار | التغيير |
|---|---|---|
| v0.2.0 | نُشرت الأداة والسيناريوهات المفتوحة على GitHub وأُرشفت على Zenodo بمعرّف DOI. | |
| v0.1 | نُشرت النسخة التجريبية من المنهجية مع ثلاثة إيصالات أدلة وقيمة تحقق على bayanatlabs.com. |
التصحيح وطلبات الإزالة
إذا وجدت في هذا الإصدار ما لا ينبغي وجوده أو ما يحتاج إلى تصحيح، فراسلنا على hello@bayanatlabs.com. نعالج طلبات الإزالة خلال 30 يومًا، وطلبات المنصات خلال 24 ساعة. كيف تعمل طلبات الإزالة
الشرح الكامل: مختبر موثوقية الوكلاء بالعربية على bayanatlabs.com (بالإنجليزية)
المنتج المرتبط: Bayanat Agents