مجموعة بيانات · متاح

أعمال ويكي مصدر العربية في الملك العام من Bayanat Labs

أعمال كاملة من ويكي مصدر العربية، أعيد بناؤها من ملف التفريغ الرسمي لويكيميديا الصادر في 1 أكتوبر 2026: كتب ومجموعات وقصائد مفردة، يُجمع كل عمل منها من صفحاته وصفحاته الفرعية والصفحات الممسوحة التي يضمّنها، ويُقسَّم إلى فصول ويُحوَّل إلى نص خالص، مع فصل الأبيات والحواشي. ولكل عمل من ذُكروا مؤلفًا أو مترجمًا أو محققًا له، وتواريخ وفاتهم من ويكي بيانات أو من صفحات المؤلفين، وفئة الملك العام والقاعدة المستخلصة منها. ولا يؤخذ المترجمون إلا من عناصر ويكي بيانات الخاصة بطبعة عربية أو ترجمة عربية، ومن ترويسات الصفحات وصفحات الفهرس، ومن مترجم يُذكر في العنوان أو في أول سطور النص. ويضم works-pd-core 40,782 عملًا توفي كل مؤلفيها ومترجميها ومحققيها سنة 1955 أو قبلها. ويضم works-life50 663 عملًا كانت آخر وفاة بين من ذُكروا فيها بين 1956 و1975: فهي في الملك العام حيث تنتهي الحماية بعد 50 سنة من الوفاة، وليست كذلك حيث تمتد 70 سنة. ومعظم الأعمال المنشورة شعر (40,732 عملًا، معظمها قصائد مفردة). ويسرد pd_decisions كل الأعمال الـ44,638 في ملف التفريغ مع الفئة والقاعدة والسبب، ومنها 86 عملًا مستبعدًا و2,723 عملًا لم يُتحقق منه، ولا تُنشر نصوصها، ولا يُنشر كذلك 339 قرارًا في works-pd-core و45 قرارًا في works-life50 لا نص فيها. وأعطى فحص منفصل لـ100 قرارًا مسحوبًا الفئة نفسها لها كلها. والنصوص المنقولة من عمل مساهمي ويكي مصدر العربية، بترخيص CC BY-SA 4.0.

إعداد: Bayanat Labs· آخر تحديث · CC BY-SA 4.0· Read in English
الترخيصCC BY-SA 4.0 للنصوص المنقولة من مساهمي ويكي مصدر العربية، وCC BY 4.0 للجداول والإحصاءات والفحوص، وApache-2.0 لشيفرة أداة البناء
الإصدارv0.1.0 · الإصدار v0.1.0، المبني من ملف تفريغ ويكي مصدر العربية الصادر في 1 أكتوبر 2026 وويكي بيانات كما قُرئت من 30 إلى 31 أكتوبر 2026، وأداة البناء موسومة على GitHub وغير موجودة على PyPI بعد.
تاريخ النشر
آخر تحديث
لمن هذا الإصدارالفرق التي تدرّب نماذج اللغة العربية مسبقًا أو تقيّمها على النصوص التراثية والحديثة المبكرة، والباحثون في الأدب العربي الذين يريدون أعمالًا كاملة مع أشخاصها وتواريخها ووضعها في الملك العام.
المستوىمتوسط

Arabic Wikisource public domain Arabic texts classical Arabic Arabic poetry Arabic pretraining data

أرقام رئيسية

40782عملًا في القسم الأساسي للملك العام works-pd-core، مع الفصول والأشخاص والتواريخ
66352748كلمة في works-pd-core، تُعدّ بعد التطبيع
66093فصلًا في works-pd-core
663عملًا في works-life50: آخر وفاة بين من ذُكروا فيها بين 1956 و1975
3414760كلمة في works-life50
40732عملًا منشورًا مصنّفًا شعرًا، معظمها قصائد مفردة
44638عملًا في ملف التفريغ، لكل منها في pd_decisions فئته وقاعدته وسببه
86عملًا مستبعدًا: توفي أحد من ذُكروا فيه بعد 1975
2723عملًا لم يُتحقق منه: تاريخ وفاة غير متاح، أو لا مؤلف مذكورًا ولا تاريخ للنص العربي قبل 1900، أو ترجمة دون مترجم مذكور
339قرارًا في works-pd-core بلا نص، ولا تُنشر: لا حروف بعد التحويل، أو ليس فيها إلا عنوان أو ترويسة أو قائمة طبعات أو نص مؤقت
45قرارًا في works-life50 بلا نص، ولا تُنشر
896شخصًا في جدول authors، يُعرَّف كل منهم بمعرّف في ويكي بيانات أو بصفحة مؤلف
100قرارًا من قرارات الملك العام سُحبت حسب الفئة لفحص منفصل
100منها أعطت الفئة نفسها بعد قراءة ويكي بيانات من جديد
100أعطت الفئة نفسها بسنوات الوفاة المكتوبة في صفحات المؤلفين
20عملًا منشورًا قورن نصه بصفحة ويكي مصدر الحالية
1الوسيط لنسبة كلمات الصفحة الحالية التي وُجدت في الفصل المنشور، على الكلمات بعد التطبيع (1 تعني كلها)
1الوسيط لنسبة كلمات الفصل المنشور التي وُجدت في الصفحة الحالية (1 تعني كلها)
0.95نسبة الصفحات المقارنة التي وُجد فيها في الإصدار 0.95 على الأقل من كلمات الصفحة الحالية؛ وقد تختلف الصفحة الحالية إذا عُدّلت بعد ملف التفريغ أو أخذت نصًا من صفحات ممسوحة أو وحدات لا يضمها الملف
23عملًا منشورًا بُني جزئيًا على الأقل من صفحات ممسوحة مُضمَّنة لها مستوى تدقيق
36عملًا منشورًا يصفه ويكي مصدر بأنه غير مكتمل
29عملًا منشورًا فيه ترميز ويكي لم يُغلق

تُحسب آليًا من الملفات المنشورة. يُقرأ كل رقم من ملف stats/stats.json أو MANIFEST.json أو qa/pd_audit.json أو qa/text_spotcheck.json في مجموعة البيانات على Hugging Face، ويُربط ببصمة SHA-256 للملف، ويسرد ملف MANIFEST.json كل ملف مع حجمه وبصمته وعدد صفوفه.

التنزيل والمعرّفات

ابدأ الاستخدام

حمّل أحد الأقسام بمكتبة datasets. ولإعادة البناء من ملف تفريغ، ثبّت أداة البناء من GitHub عند وسم الإصدار v0.1.0، فالحزمة غير موجودة على PyPI بعد.

from datasets import load_dataset

core = load_dataset("Bayanat-Labs/arabic-wikisource-pd", "works-pd-core", split="train")
print(core[0]["title"], core[0]["author"], len(core[0]["chapters"]))

pip install "git+https://github.com/Bayanat-Labs/arabic-wikisource-pd@v0.1.0"
arabic-wikisource-pd fetch --date 20261001
arabic-wikisource-pd wikidata --date 20261001
arabic-wikisource-pd build --date 20261001

ما الذي يتضمنه الإصدار

الجزءالترخيصضمن الإصدار
works-pd-core: صف لكل عمل توفي كل مؤلفيه ومترجميه ومحققيه سنة 1955 أو قبلها، مع النص والفصول والأبيات والحواشي والأشخاص والتواريخ وصفحات المصدرCC BY-SA 4.0نعم
works-life50: أعمال آخر وفاة فيها بين 1956 و1975، في الملك العام حيث تنتهي الحماية بعد 50 سنة من الوفاة، وليست كذلك حيث تمتد 70 سنةCC BY-SA 4.0نعم
تصدير works-pd-core بصيغة JSON Lines، عمل واحد في كل سطرCC BY-SA 4.0نعم
جدولا authors وpd_decisions (بقواعد مثل all-died-by-1955 وlatest-death-1956-1975 وdeath-after-1975 وanonymous-not-pre-1900 وtranslation-no-translator)، والإحصاءات والفحوصCC BY 4.0نعم
شيفرة أداة البناء على GitHubApache-2.0نعم

صيغة النسبة: Text: Arabic Wikisource contributors, CC BY-SA 4.0 (each record links its pages and their history). Dataset: Arabic Wikisource Public-Domain Works by Bayanat Labs. https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd

الاستخدامات المقصودة

  • تدريب نماذج اللغة العربية مسبقًا أو تقييمها على أعمال كاملة ببنية فصولها، مع الإبقاء على النسبة إلى مساهمي ويكي مصدر العربية وفق CC BY-SA 4.0.
  • اختيار الأعمال حسب فئة الملك العام المناسبة لبلدك: works-pd-core، أو works-life50 حيث تنتهي الحماية بعد 50 سنة من الوفاة فقط.
  • دراسة النصوص العربية حسب المؤلف أو قرن الوفاة أو النوع أو حالة التدقيق، مع روابط إلى كل صفحة مصدر ومراجعتها.

خارج النطاق

  • عدّ الفئات استشارة قانونية: فهي قواعد تُطبَّق على التواريخ المسجّلة في ويكي بيانات وويكي مصدر.
  • استخدام works-life50 حيث تمتد الحماية 70 سنة بعد الوفاة، كما في الدول الأعضاء في الاتحاد الأوروبي.
  • أعمال التعرّف الضوئي أو الصور على مستوى الصفحة: النصوص على مستوى الصفحة مع صورها في أطلس الوثائق العربية.

الحقوق باختصار

التدريب والعرض وإعادة التوزيع وإنشاء الأصوات الاصطناعية أذونات منفصلة.

الاستخدامالحالةملاحظة
التدريبمسموحالنصوص المنقولة بترخيص CC BY-SA 4.0 من ويكي مصدر العربية، مع الإبقاء على النسبة وشرط المشاركة بالمثل. والأعمال الأصلية في الملك العام وفق الفئة الموصوفة.
العرضمسموحمع النسبة إلى مساهمي ويكي مصدر العربية وروابط إلى الصفحات (CC BY-SA 4.0)، والجداول بترخيص CC BY 4.0 مع النسبة إلى المصدر.
إعادة التوزيعمسموحالنصوص بترخيص CC BY-SA 4.0 (المشاركة بالمثل)، وجدولا authors وpd_decisions والإحصاءات والفحوص بترخيص CC BY 4.0، وشيفرة أداة البناء بترخيص Apache-2.0.
الصوت الاصطناعيلا ينطبقلا يتضمن ملفات صوتية.

القيود

  • نُقلت نصوص كثيرة من طبعات حديثة لا يُذكر محققوها، والفئة تقوم على من ذُكروا فقط، فقد تبقى في النص تعليقات محقق حديث غير مذكور أو تصحيحاته.
  • تُحذف مقدمات المحققين المحدثين حين يكون عنوانها دالًّا على ذلك، وتبقى في النص المقدمة التي تحمل عنوانًا آخر.
  • لا يُعدّ العمل ترجمة إلا إذا دلّ على ذلك تصنيف أو ويكي بيانات أو اللغات المسجّلة للمؤلف، ولا يُعرف مترجمه إلا إذا ذكرته ويكي بيانات (في عنصر النسخة العربية) أو ترويسة الصفحة أو صفحة الفهرس أو العنوان أو أول سطور النص؛ والترجمة الحديثة لعمل قديم التي لا تحمل أيًّا من هذه الإشارات تُحسم بتواريخ المؤلف الأصلي.
  • تُحسم الدورية أو المجموعة عملًا واحدًا، فيكفي مساهم واحد متأخر الوفاة لاستبعادها كلها.
  • يصف ويكي مصدر 36 عملًا منشورًا بأنه غير مكتمل، وفي 29 عملًا ترميز ويكي لم يُغلق.
  • لا يضم ملف التفريغ النص الذي تأخذه الصفحات من وحدات Lua أو من القوالب، كصفحات القرآن، فلا يُضمَّن.
  • معظم الأعمال المنشورة شعر، والنثر الحديث جزء صغير منها، والأنواع مستخلصة بقواعد لا بقراءة النصوص.
  • الأعداد والنصوص والتواريخ هي ما في ملف التفريغ الصادر في 1 أكتوبر 2026، مع ويكي بيانات كما قُرئت من 30 إلى 31 أكتوبر 2026؛ وأجرت Bayanat Labs الفحوص، ولم يراجع أي شخص النصوص أو القرارات.

المصادر والتراخيص

المصدرالترخيصيُعاد توزيعه هنا
Arabic Wikisource dump of 1 October 2026 (arwikisource-20261001: pages-articles, page_props, categorylinks and linktarget)CC BY-SA 4.0، والنصوص المنقولة يعاد نشرها مع النسبة وروابط الصفحاتنعم
Wikidata (authors, translators, editors and death dates), read through its API from 30 to 31 October 2026CC0 1.0نعم
arabic-normalize 0.1.0, policy bayanat-norm-v1, for text_norm and the word countsApache-2.0، ويُستخدم لبناء الإصدار ولا يُضمَّنلا

تأتي النصوص من ملف تفريغ ويكيميديا وحده، وبصمات ملفات التفريغ مسجّلة في PROVENANCE.jsonl. وقُرئت ويكي بيانات عبر واجهتها البرمجية بوكيل المستخدم الخاص بالبيانات المفتوحة من Bayanat Labs، بطلب واحد في الثانية. ولا تتضمن البيانات أي أسماء لحسابات المساهمين. وويكي مصدر وويكي بيانات علامتان تجاريتان لمؤسسة ويكيميديا، ولا صلة لهذه المجموعة بها ولا تؤيدها المؤسسة. ومن Bayanat Labs أيضًا: أطلس الوثائق العربية، وفيه النصوص على مستوى الصفحة مع حالة تدقيقها. تفاصيل المصادر (بالإنجليزية)

طريقة الاستشهاد

صيغة الاستشهاد:

Bayanat Labs (2026). Arabic Wikisource Public-Domain Works, version 0.1.0 (Arabic Wikisource dump of 2026-10-01; text by Arabic Wikisource contributors, CC BY-SA 4.0). Bayanat Labs. https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd

لا يوجد معرّف DOI. استشهد بالرابط الوارد في صيغة الاستشهاد أعلاه وبتاريخ اطلاعك عليه.

@misc{bayanatlabs2026arabicwikisourcepd,
  author       = {{Bayanat Labs}},
  title        = {Arabic Wikisource Public-Domain Works, version 0.1.0 (Arabic Wikisource dump of 2026-10-01; text by Arabic Wikisource contributors, CC BY-SA 4.0)},
  year         = {2026},
  month        = oct,
  howpublished = {\url{https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd}}
}

كيف نتعامل مع الاستشهاد (بالإنجليزية)

سجل التغييرات

التاريخالإصدارالتغيير
v0.1.0فئتا الملك العام وجدولا المؤلفين والقرارات وتصدير JSON Lines والإحصاءات والفحوص على Hugging Face، وأداة البناء على GitHub.

التصحيح وطلبات الإزالة

إذا وجدت في هذا الإصدار ما لا ينبغي وجوده أو ما يحتاج إلى تصحيح، فراسلنا على hello@bayanatlabs.com. نعالج طلبات الإزالة خلال 30 يومًا، وطلبات المنصات خلال 24 ساعة. كيف تعمل طلبات الإزالة

المنتج المرتبط: Bayanat Knowledge

هل تحتاج إلى بيانات جاهزة للإنتاج وواضحة الحقوق؟

ننشر مجانًا بيانات اختبار اصطناعية ومعايير تقييم مفتوحة ونتائج وشيفرات وأدلة. أما البيانات على نطاق واسع فتُرخَّص أو تُبنى حسب الطلب: مجموعات بيانات عربية جاهزة للترخيص من الكلام والنصوص، ينصّ الاتفاق فيها صراحةً على حقوق الاستخدام التجاري في الذكاء الاصطناعي، إضافة إلى الجمع والتوسيم والتقييم حسب الطلب.

Bayanat Knowledge: رخّص كتبًا، ونصوصًا بالفصحى مصنفة حسب الموضوع، وبيانات أسئلة وأجوبة مهيكلة. لكل مجموعة مهمة تدريب واضحة، ولها أعدادها وتفاصيل ترخيصها الخاصة.

إصدارات مفتوحة أخرى
LabelBench من Bayanat Labs ← مختبر موثوقية الوكلاء بالعربية من Bayanat Labs ← مجموعة بدء تقييم الاسترجاع العربي من Bayanat Labs ← قالب إرشادات توسيم البيانات العربية من Bayanat Labs ← سياسة البرنامج المفتوح ودليل التشغيل من Bayanat Labs ← قالب مجموعات البيانات وحزمة أدوات الإصدار من Bayanat Labs ← أداة توحيد النص العربي من Bayanat Labs (arabic-normalize) ← قوالب موافقة المساهمين من Bayanat Labs ← ArabicWER من Bayanat Labs: حساب معدل خطأ الكلمات والحروف للعربية ← حزمة اختبار مطابقة يونيكود للنص العربي من Bayanat Labs ← مراجع الصيغ الخليجية واختبارات التحويل بين المنطوق والمكتوب من Bayanat Labs ← أطلس الوثائق العربية من Bayanat Labs ← حزمة البيانات الشخصية العربية لـ Presidio من Bayanat Labs ← مؤشر ضريبة الترميز العربية من Bayanat Labs ← أزواج القنوات للتعرّف على الكلام العربي من Bayanat Labs ← مدقّق توافق تراخيص البيانات من Bayanat Labs ← متتبّع نماذج الذكاء الاصطناعي العربية من Bayanat Labs ← استخراج حقول النماذج العربية من Bayanat Labs ← الاستدلال على البيانات العامة بالعربية من Bayanat Labs ← أطلس أماكن العالم العربي من Bayanat Labs ← فهرس حقوق مجموعات البيانات العربية من Bayanat Labs ← ويكيبيديا العربية الشهرية من Bayanat Labs ← حاسبة ضريبة التوكنات العربية من Bayanat Labs ← شريحة ويكي بيانات للعالم العربي من Bayanat Labs ← مدقّق مواضع الكيانات المسمّاة العربية من Bayanat Labs ← عدّاد ساعات الكلام العربي المفتوح من Bayanat Labs ← المعجم الجغرافي العربي من Bayanat Labs ← مكتبة الزحف polite-fetch من Bayanat Labs ← إحصاء حقوق الويب العربي من Bayanat Labs ←

لم يراجع النصَّ العربي بعدُ كاتبٌ لغته الأم العربية، والنص الإنجليزي هو المعتمد. (The Arabic text has not yet been reviewed by a native Arabic writer; the English governs.)