مجموعة بدء تقييم الاسترجاع العربي من Bayanat Labs
مجموعة بدء تقييم الاسترجاع العربي بيانات اختبار صغيرة واصطناعية بالكامل، بالعربية والإنجليزية، لاختبار أنظمة البحث والتوليد المعزز بالاسترجاع (RAG). تغطي أسئلة باللهجة الخليجية والفصحى، وأسئلة عربية أدلتها بالإنجليزية، ونسخًا قديمة من السياسات حلّت محلها نسخ أحدث، وأسئلة لا إجابة لها في المصادر، مع أحكام صلة متدرجة بصيغة TREC qrels وإجابات مرتبطة بالأدلة، بترخيص CC BY 4.0.
| الترخيص | CC BY 4.0 |
|---|---|
| الإصدار | v0.1 |
| تاريخ النشر | |
| آخر تحديث | |
| لمن هذا الإصدار | المهندسون الذين يختبرون نظام بحث أو RAG عربيًا أو ثنائي اللغة وطريقة تقييمه قبل إجراء تقييم كامل. |
| المستوى | مبتدئ |
أرقام رئيسية
تُحسب آليًا من الملفات المنشورة. لا يوجد ملف MANIFEST.json لهذا الإصدار لأنه سبق البرنامج المفتوح. يُحسب كل رقم من ملف منشور ويُربط بقيمة SHA-256 الخاصة به (المدرجة أيضًا في SHA256SUMS.txt).
التنزيل والمعرّفات
| المكان | المحتوى |
|---|---|
| bayanatlabs.com | corpus.jsonl |
| bayanatlabs.com | queries.jsonl |
| bayanatlabs.com | qrels.txt (TREC) |
| bayanatlabs.com | judgments.jsonl |
| bayanatlabs.com | answers.jsonl |
| bayanatlabs.com | ملف README |
| bayanatlabs.com | SHA256SUMS.txt |
| GitHub | كل الملفات على GitHub |
| Zenodo | أرشيف Zenodo (كل الإصدارات) 10.5281/zenodo.23355780 |
ابدأ الاستخدام
نزّل الملفات وقيّم نتائج الاسترجاع
git clone https://github.com/Bayanat-Labs/arabic-retrieval-starter-kit
# Recall@5, counting grades 2 and 3 as relevant (see the README)
trec_eval -l 2 -m recall.5 arabic-retrieval-starter-kit/v0.1/qrels.txt your-run.txtما الذي يتضمنه الإصدار
| الجزء | الترخيص | ضمن الإصدار |
|---|---|---|
| الملفات corpus.jsonl وqueries.jsonl وqrels.txt وjudgments.jsonl وanswers.jsonl | CC BY 4.0 | نعم |
| الملفات README.md وLICENSE.txt وSHA256SUMS.txt | CC BY 4.0 | نعم |
صيغة النسبة: Bayanat Labs, Arabic Retrieval Starter Kit v0.1, https://www.bayanatlabs.com/research/arabic-retrieval-starter-kit
الاستخدامات المقصودة
- التحقق من أن نظام الاسترجاع أو RAG وطريقة تقييمه وفحص إجاباته تعمل كما تتوقع قبل إجراء تقييم كامل.
- اختبار الأسئلة اللهجية على مصادر رسمية، والأسئلة العربية على أدلة إنجليزية، والنسخ القديمة التي حلّت محلها نسخ أحدث، والأسئلة التي لا إجابة لها.
- تعلّم تقييم أحكام الصلة بصيغة TREC qrels أو تدريسه باستخدام trec_eval أو pytrec_eval أو ir_measures.
خارج النطاق
- ترتيب الأنظمة: صُممت المجموعة لاختبار مسار العمل، لا لترتيب الأنظمة.
- الأدلة الواقعية: الشركة والسياسات والأرقام خيالية، ولا تتضمن بيانات عملاء أو بيانات شخصية.
- عينة من مجموعة بيانات تجارية لدى Bayanat Labs.
الحقوق باختصار
التدريب والعرض وإعادة التوزيع وإنشاء الأصوات الاصطناعية أذونات منفصلة.
| الاستخدام | الحالة | ملاحظة |
|---|---|---|
| التدريب | مسموح | بترخيص CC BY 4.0 مع نسبتها إلى المصدر. |
| العرض | مسموح | بترخيص CC BY 4.0 مع نسبتها إلى المصدر. |
| إعادة التوزيع | مسموح | بترخيص CC BY 4.0 مع نسبتها إلى المصدر وبيان أي تعديل. |
| الصوت الاصطناعي | لا ينطبق | نصوص فقط. |
القيود
- أحكام كاتب واحد: كُتبت الدرجات مع البيانات نفسها، لذلك لا يُذكر أي اتفاق بين المراجعين.
- نصوص اصطناعية لشركة اتصالات خيالية، فلا تمثل مستندات مؤسسية حقيقية.
- صغيرة عمدًا: لا تدل نتائجها على الأداء عند التوسع.
المصادر والتراخيص
لا محتوى من أطراف ثالثة. كتبت Bayanat Labs كل مقطع وسؤال وحكم لشركة اتصالات خيالية. تفاصيل المصادر (بالإنجليزية)
طريقة الاستشهاد
صيغة الاستشهاد:
Bayanat Labs (2026). Arabic Retrieval Starter Kit (v0.1) [Data set]. Zenodo. https://doi.org/10.5281/zenodo.23355781
- معرّف DOI الجامع (لكل الإصدارات): 10.5281/zenodo.23355780
- معرّف DOI لهذا الإصدار: 10.5281/zenodo.23355781
- ملف CITATION.cff
@dataset{bayanat2026retrievalkit,
author = {{Bayanat Labs}},
title = {Arabic Retrieval Starter Kit},
version = {v0.1},
year = {2026},
month = oct,
publisher = {Zenodo},
doi = {10.5281/zenodo.23355781},
url = {https://doi.org/10.5281/zenodo.23355781}
}
كيف نتعامل مع الاستشهاد (بالإنجليزية)
سجل التغييرات
| التاريخ | الإصدار | التغيير |
|---|---|---|
| v0.1 | نُشرت ملفات v0.1 نفسها على GitHub وأُرشفت على Zenodo بمعرّف DOI. | |
| v0.1 | الإصدار الأول على bayanatlabs.com. |
التصحيح وطلبات الإزالة
إذا وجدت في هذا الإصدار ما لا ينبغي وجوده أو ما يحتاج إلى تصحيح، فراسلنا على hello@bayanatlabs.com. نعالج طلبات الإزالة خلال 30 يومًا، وطلبات المنصات خلال 24 ساعة. كيف تعمل طلبات الإزالة
الشرح الكامل: مجموعة بدء تقييم الاسترجاع العربي على bayanatlabs.com (بالإنجليزية)
المنتج المرتبط: Bayanat Search