معيار تقييم · متاح

فحص المراجع العربية من Bayanat Labs

معيار لأدوات التحقق من المراجع العلمية العربية: هل العمل المذكور موجود، وهل يتطابق عنوانه وسنته وجهة نشره وترتيب مؤلفيه ومعرّف DOI الخاص به؟ يختبر المعيار الوجود وصحة النسبة، ولا يختبر دعم الورقة لأي ادعاء. ويضم 5,045 حكمًا على مراجع تستند إلى 2,240 عملًا لها معرّفات DOI، منها 700 مرجعًا مختلقًا و799 مرجعًا يحمل DOI صحيحًا لعمل آخر. في قسم الاختبار (3,005 حكمًا)، يقبل البحث بالمعرّف 67.7% من المراجع الخاطئة، ويقبل تطابق العنوان 72.4%. فالبحث بالمعرّف لا يرى أن DOI حقيقيًا يخص ورقة أخرى، وتطابق العنوان لا يرى خطأ DOI أو السنة أو جهة النشر أو ترتيب المؤلفين. أما الفحص الكامل للحقول فيقبل 0%، لكنه كُتب مع قوالب المراجع نفسها، فهذه النتيجة تبيّن توافق التصنيفات مع الأداة في هذه الصيغ، ولا تقيس أداءها على مراجع من الواقع. الأحكام بترخيص CC BY 4.0، وفهرس الأعمال بترخيص CC0 1.0، والأداة بترخيص Apache-2.0.

إعداد: Bayanat Labs· آخر تحديث · CC BY 4.0· Read in English
الترخيصCC BY 4.0 للأحكام والتصنيفات والنتائج ونص الصفحة، وCC0 1.0 لفهرس الأعمال من OpenAlex، وApache-2.0 لشيفرة الأداة
الإصدارv0.1.0 · مبني من سجلات OpenAlex المقروءة في 2026-11-04، مع فحص المعرّفات في اليوم نفسه، والأداة موسومة بالإصدار v0.1.0 على GitHub وغير منشورة على PyPI.
تاريخ النشر
آخر تحديث
لمن هذا الإصدارالفرق التي تبني أدوات التحقق من المراجع العلمية العربية أو تشتريها أو تختبرها، وتريد اختبارًا لا يجتازه البحث بالمعرّف تلقائيًا.
المستوىمتوسط

Arabic citation benchmark reference checking DOI verification fabricated citations OpenAlex

أرقام رئيسية

5045حكمًا على مراجع، وقد يكون للعمل الواحد أحكام كثيرة، فهي ليست عددًا للأعمال
2240عملًا له DOI في فهرس الأعمال
851جهة نشر، بحسب معرّف المصدر في OpenAlex
846اسمًا مميزًا لجهات النشر
1573عملًا بعنوان يجتاز تدقيق العنوان العربي
1722عملًا في جهة نشر تنسبها OpenAlex إلى بلد من بلدان جامعة الدول العربية
1055عملًا يجمع الأمرين
517عملًا بلا بلد معروف لجهة النشر
1800حكمًا نتيجته verified
2545نتيجته mismatched: حقل واحد مغيَّر، أو DOI لعمل آخر
799منها تحمل DOI صحيحًا لعمل آخر
700نتيجته not_found: مراجع مختلقة، معرّفها غير مسجل لدى doi.org وCrossref وDataCite في يوم الفحص
3005حكمًا في قسم الاختبار
1933مرجعًا خاطئًا بينها
67.7في المئة منها يقبلها البحث بالمعرّف
72.4في المئة يقبلها تطابق العنوان التقريبي
0في المئة يقبلها الفحص الكامل للحقول، الذي كُتب مع قوالب المراجع نفسها
1283حكمًا في test_ood، ولا تظهر بادئات DOI فيه في غيره
67.7في المئة من المراجع الخاطئة هناك يقبلها البحث بالمعرّف
72.3في المئة يقبلها تطابق العنوان
24اسم عائلة مخترعًا في السجلات المختلقة، ولم يظهر أي منها بين أسماء المؤلفين وجهات النشر في OpenAlex عند الفحص
20فحصًا للإصدار، اجتازتها كلها

تُحسب آليًا من الملفات المنشورة. يُقرأ كل رقم من ملفي الأعداد ونتائج خطوط الأساس في مجلد results من مجموعة البيانات على Hugging Face عند المراجعة ⁦72eee605981bf7dc33e9f09eb56b5f209d4c1da2⁩، ويُربط ببصمة SHA-256 للملف، وتُحسب النسب المئوية من هذه الملفات وتُقرَّب إلى منزلة عشرية واحدة كما تكتبها بطاقة البيانات. والشيفرة عند الوسم v0.1.0، الإيداع ⁦cecebb15ab5feffe889c736850d5e62f8e8fd2db⁩. ومراجعة Space هي ⁦d333428c5469b5112c07cef9a317b811533976c5⁩. ويسرد ملف MANIFEST.json كل ملف مع حجمه وبصمته.

التنزيل والمعرّفات

ابدأ الاستخدام

حمّل أحد الإعدادات بمكتبة datasets. وتُثبَّت الأداة من GitHub عند وسم الإصدار v0.1.0، فالحزمة غير منشورة على PyPI.

from datasets import load_dataset

judgments = load_dataset("Bayanat-Labs/arabic-citation-check", "judgments")
index = load_dataset("Bayanat-Labs/arabic-citation-check", "work_index")

pip install "git+https://github.com/Bayanat-Labs/arabic-citation-check@v0.1.0"
arabic-citation-check check --index works.jsonl "<citation>"

ما الذي يتضمنه الإصدار

الجزءالترخيصضمن الإصدار
judgments (Parquet وJSON Lines): نصوص المراجع مع الفئة والنتيجة والحقول المذكورة، في الأقسام dev وtest وtest_oodCC BY 4.0نعم
work_index (Parquet وJSON Lines): الحقول الببليوغرافية لكل عمل، من OpenAlexCC0 1.0نعم
الأعداد ونتائج خطوط الأساس وفحوص الإصدار وسجل فحوص DOI في مجلد resultsCC BY 4.0نعم
الأداة على GitHub: أداة سطر الأوامر (arabic-citation-check) وخطوط أساس البحث والمنهجيةApache-2.0نعم
صفحة الأمثلة وخطوط الأساس الثابتة على Hugging Face Spaces، بالإنجليزية والعربية: شيفرتهاApache-2.0نعم
نص هذه الصفحةCC BY 4.0نعم

صيغة النسبة: Arabic Citation Check by Bayanat Labs, CC BY 4.0; work index CC0 1.0, from OpenAlex. https://huggingface.co/datasets/Bayanat-Labs/arabic-citation-check

الاستخدامات المقصودة

  • اختبار أداة تحقق على المراجع العربية، بحقل citation وحده وجدول work_index مدخلًا.
  • مقارنة أداة بالبحث بالمعرّف وتطابق العنوان، فئةً فئة.
  • فحص المراجع بنفسك بأداة سطر الأوامر وفهرس أعمال.

خارج النطاق

  • اختبار دعم الورقة لادعاء ما: يختبر المعيار الوجود وصحة النسبة فقط.
  • تقدير مدى اختلاق نموذج ما للمراجع: فكل نصوص المراجع مولّدة من قوالب.
  • فهم نتيجة الفحص الكامل على أنها أداء في الواقع: فهي تبيّن توافق التصنيفات مع الأداة في هذه الصيغ.

الحقوق باختصار

التدريب والعرض وإعادة التوزيع وإنشاء الأصوات الاصطناعية أذونات منفصلة.

الاستخدامالحالةملاحظة
التدريبمسموحالأحكام بترخيص CC BY 4.0 مع النسبة إلى المصدر، وفهرس الأعمال بترخيص CC0 1.0. وقد بُني للاختبار، وأقسامه كلها متاحة للعموم.
العرضمسموحبترخيص CC BY 4.0 مع النسبة إلى المصدر، وأسماء المؤلفين في مراجع الأعمال الحقيقية هي الأسماء التي تسردها OpenAlex لذلك العمل.
إعادة التوزيعمسموحالأحكام والتصنيفات والنتائج بترخيص CC BY 4.0، وفهرس الأعمال بترخيص CC0 1.0، والشيفرة بترخيص Apache-2.0. ولا تؤيد OpenAlex وCrossref وDataCite هذا المعيار. ولا يشمل أيٌّ منها اسم Bayanat Labs وشعارها.
الصوت الاصطناعيلا ينطبقلا يتضمن ملفات صوتية.

القيود

  • تُحسب الأحكام والأعمال كلٌّ على حدة: 5,045 حكمًا على 2,240 عملًا، وقد يكون للعمل الواحد أحكام كثيرة. وتُحسب الأعمال وجهات النشر كما صدرت: 851 معرّفًا لجهات النشر تحمل 846 اسمًا مميزًا، لأن بعض جهات النشر تشترك في الاسم.
  • كُتب الفحص الكامل للحقول مع قوالب المراجع نفسها، فنتيجته تبيّن توافق التصنيفات مع الأداة في هذه الصيغ، ولا تقيس أداءها على مراجع من الواقع.
  • تتوقف نسب البحث (67.7% و72.4% على قسم الاختبار) على مزيج الفئات في هذا المعيار، وهو محدد بحصص ثابتة. ويعطي مزيج آخر نسبًا أخرى، ولا تتوقف عليه صفوف الفئات في بطاقة البيانات.
  • ما يمكن أن يمر: يمر المرجع إذا أغفل حقلًا (ويظهر الحقل بحالة missing)، أو ذكر الأحرف الأولى أو أسماء العائلات فقط، أو قطع قائمة المؤلفين بعد عبارة et al، أو أضاف نصًا بعد جهة النشر. ولا يضم المعيار فئة لمؤلف مضاف أو اسم شخصي مختلف أو كلمات زائدة في العنوان، ويرصدها الفحص الكامل، وتغطي هذه القواعد اختبارات الحزمة لا النتائج المذكورة.
  • نصوص المراجع كلها مولّدة من قوالب بأربعة أنماط مبسطة، فالنتائج لا تقول شيئًا عن مدى اختلاق أي نموذج للمراجع. وقوائم المراجع الحقيقية أكثر فوضى.
  • تغطية OpenAlex للدوريات العربية جزئية، والعينتان ليستا حصرًا شاملًا. وتسميات بلد جهة النشر واللغة من المصدر وفيها أخطاؤه. ولا يُعرف بلد جهة النشر إلا لجزء من الجهات، فليس لـ 517 عملًا بلد معروف.
  • تعني نتيجة verified أن المرجع يتفق مع سجل OpenAlex يوم قراءته، فتمر أخطاء المصدر. وقد فُحص التسجيل، ولم تُقارن بيانات السجلات الوصفية. وقد يُسجَّل لاحقًا معرّف كان غير مسجل يوم الفحص.
  • تتبع السجلات المختلقة عددًا قليلًا من القوالب، وتتكرر أسماء عائلاتها عبر الأقسام، فيمكن لنظام أن يتعرف عليها من النص وحده. فقيّم هذه الفئة بأنظمة تعتمد على البحث.
  • الأقسام dev وtest وtest_ood كلها متاحة للعموم، فيمكن ضبط نظام عليها. ولتقييم أداتك أعطها حقل citation وحده وجدول work_index، ففي الحقول الأخرى الإجابة.
  • مرجع العمل الحقيقي لا يذكر إلا مؤلفي ذلك العمل كما تسردهم OpenAlex. وتستخدم السجلات المختلقة أسماء شخصية مقرونة بـ 24 اسم عائلة مخترعًا لم يظهر لها أي تطابق بين أسماء المؤلفين وجهات النشر في OpenAlex عند الفحص، وكل سجل منها موسوم بذلك في حقوله. لتصحيح سجل عنك أو عن عملك أو حذفه، اكتب إلى ⁦hello@bayanatlabs.com⁩ مع work_id أو record_id.

المصادر والتراخيص

المصدرالترخيصيُعاد توزيعه هنا
OpenAlex works and sources, read through its API on 4 November 2026CC0 1.0، وتُعاد الحقول الببليوغرافية في فهرس الأعمالنعم
Registration status from doi.org, Crossref and DataCite, read on 4 November 2026تُسجَّل رموز حالة وتواريخلا

عينتان ببذرة ثابتة من واجهة OpenAlex: أعمال موسومة بالعربية ولها DOI، وأعمال لها DOI في دوريات كل بلد من بلدان جامعة الدول العربية. ونسبة العناوين العربية محددة بالتصميم. ويُسجَّل كل فحص DOI بالمضيف والحالة والتاريخ في الملف results/doi_checks.jsonl. ولا تؤيد OpenAlex وCrossref وDataCite هذا المعيار. تفاصيل المصادر (بالإنجليزية)

طريقة الاستشهاد

صيغة الاستشهاد:

Bayanat Labs (2026). Arabic Citation Check, version 0.1.0. Bayanat Labs. https://huggingface.co/datasets/Bayanat-Labs/arabic-citation-check

لا يوجد معرّف DOI. استشهد بالرابط الوارد في صيغة الاستشهاد أعلاه وبتاريخ اطلاعك عليه.

@misc{bayanatlabs2026arabiccitationcheck,
  author       = {{Bayanat Labs}},
  title        = {Arabic Citation Check, version 0.1.0},
  year         = {2026},
  month        = nov,
  howpublished = {\url{https://huggingface.co/datasets/Bayanat-Labs/arabic-citation-check}}
}

كيف نتعامل مع الاستشهاد (بالإنجليزية)

سجل التغييرات

التاريخالإصدارالتغيير
v0.1.0الأحكام وفهرس الأعمال والنتائج على Hugging Face، وصفحة الأمثلة وخطوط الأساس الثابتة على Hugging Face Spaces، والأداة على GitHub.

التصحيح وطلبات الإزالة

إذا وجدت في هذا الإصدار ما لا ينبغي وجوده أو ما يحتاج إلى تصحيح، فراسلنا على hello@bayanatlabs.com. نعالج طلبات الإزالة خلال 30 يومًا، وطلبات المنصات خلال 24 ساعة. كيف تعمل طلبات الإزالة

المنتج المرتبط: Bayanat Bench

هل تحتاج إلى بيانات عربية جاهزة للإنتاج وواضحة الحقوق؟ ابدأ مع Bayanat Labs

ننشر مجانًا بيانات اختبار اصطناعية ومعايير تقييم مفتوحة ونتائج وشيفرات وأدلة. أما البيانات على نطاق واسع فتُرخَّص أو تُبنى حسب الطلب لدى Bayanat Labs: مجموعات بيانات عربية جاهزة للترخيص من الكلام والنصوص، تشمل ثلاثين ألف ساعة من الكلام العربي، وينصّ الاتفاق فيها صراحةً على حقوق الاستخدام التجاري في الذكاء الاصطناعي، إضافة إلى الجمع والتوسيم والتقييم حسب الطلب على يد فريق يضم أكثر من خمسين ألف خبير توسيم، منهم متحدثون أصليون ولغويون ومهنيون مرخّصون في مجالاتهم اجتازوا الفرز. ويبدأ العمل بمشروع تجريبي محدد النطاق، مع ضبط جودة بمجموعة ذهبية وتقرير جودة، يُنجَز عادةً خلال أسبوعين.

Bayanat Bench: قارن إصدارات النماذج باستخدام اللغة والمستندات والمهام التي يعتمد عليها مستخدموك. رخّص بيانات تقييم عربية، أو ابنِ مجموعة اختبار خاصة حول منتجك.

إصدارات مفتوحة أخرى
LabelBench من Bayanat Labs ← مختبر موثوقية الوكلاء بالعربية من Bayanat Labs ← مجموعة بدء تقييم الاسترجاع العربي من Bayanat Labs ← قالب إرشادات توسيم البيانات العربية من Bayanat Labs ← سياسة البرنامج المفتوح ودليل التشغيل من Bayanat Labs ← قالب مجموعات البيانات وحزمة أدوات الإصدار من Bayanat Labs ← أداة توحيد النص العربي من Bayanat Labs (arabic-normalize) ← قوالب موافقة المساهمين من Bayanat Labs ← ArabicWER من Bayanat Labs: حساب معدل خطأ الكلمات والحروف للعربية ← حزمة اختبار مطابقة يونيكود للنص العربي من Bayanat Labs ← مراجع الصيغ الخليجية واختبارات التحويل بين المنطوق والمكتوب من Bayanat Labs ← أطلس الوثائق العربية من Bayanat Labs ← حزمة البيانات الشخصية العربية لـ Presidio من Bayanat Labs ← مؤشر ضريبة الترميز العربية من Bayanat Labs ← أزواج القنوات للتعرّف على الكلام العربي من Bayanat Labs ← مدقّق توافق تراخيص البيانات من Bayanat Labs ← متتبّع نماذج الذكاء الاصطناعي العربية من Bayanat Labs ← استخراج حقول النماذج العربية من Bayanat Labs ← الاستدلال على البيانات العامة بالعربية من Bayanat Labs ← أطلس أماكن العالم العربي من Bayanat Labs ← فهرس حقوق مجموعات البيانات العربية من Bayanat Labs ← ويكيبيديا العربية الشهرية من Bayanat Labs ← حاسبة ضريبة التوكنات العربية من Bayanat Labs ← شريحة ويكي بيانات للعالم العربي من Bayanat Labs ← مدقّق مواضع الكيانات المسمّاة العربية من Bayanat Labs ← عدّاد ساعات الكلام العربي المفتوح من Bayanat Labs ← المعجم الجغرافي العربي من Bayanat Labs ← مكتبة الزحف polite-fetch من Bayanat Labs ← إحصاء حقوق الويب العربي من Bayanat Labs ← أعمال ويكي مصدر العربية في الملك العام من Bayanat Labs ← مؤشر البيانات العربية من Bayanat Labs ← الصيغ اللاتينية للأسماء العربية من Bayanat Labs ← فواتير إلكترونية وإيصالات ونماذج سعودية اصطناعية ثنائية اللغة من Bayanat Labs ← مقدّر تكلفة بيانات العربية والتجربة الأولية من Bayanat Labs ← الكتب العربية المفتوحة من Bayanat Labs ←

لم يراجع النصَّ العربي بعدُ كاتبٌ لغته الأم العربية، والنص الإنجليزي هو المعتمد. (The Arabic text has not yet been reviewed by a native Arabic writer; the English governs.)