أعمال ويكي مصدر العربية في الملك العام من Bayanat Labs
أعمال كاملة من ويكي مصدر العربية، أعيد بناؤها من ملف التفريغ الرسمي لويكيميديا الصادر في 1 أكتوبر 2026: كتب ومجموعات وقصائد مفردة، يُجمع كل عمل منها من صفحاته وصفحاته الفرعية والصفحات الممسوحة التي يضمّنها، ويُقسَّم إلى فصول ويُحوَّل إلى نص خالص، مع فصل الأبيات والحواشي. ولكل عمل من ذُكروا مؤلفًا أو مترجمًا أو محققًا له، وتواريخ وفاتهم من ويكي بيانات أو من صفحات المؤلفين، وفئة الملك العام والقاعدة المستخلصة منها. ولا يؤخذ المترجمون إلا من عناصر ويكي بيانات الخاصة بطبعة عربية أو ترجمة عربية، ومن ترويسات الصفحات وصفحات الفهرس، ومن مترجم يُذكر في العنوان أو في أول سطور النص. ويضم works-pd-core 40,782 عملًا توفي كل مؤلفيها ومترجميها ومحققيها سنة 1955 أو قبلها. ويضم works-life50 663 عملًا كانت آخر وفاة بين من ذُكروا فيها بين 1956 و1975: فهي في الملك العام حيث تنتهي الحماية بعد 50 سنة من الوفاة، وليست كذلك حيث تمتد 70 سنة. ومعظم الأعمال المنشورة شعر (40,732 عملًا، معظمها قصائد مفردة). ويسرد pd_decisions كل الأعمال الـ44,638 في ملف التفريغ مع الفئة والقاعدة والسبب، ومنها 86 عملًا مستبعدًا و2,723 عملًا لم يُتحقق منه، ولا تُنشر نصوصها، ولا يُنشر كذلك 339 قرارًا في works-pd-core و45 قرارًا في works-life50 لا نص فيها. وأعطى فحص منفصل لـ100 قرارًا مسحوبًا الفئة نفسها لها كلها. والنصوص المنقولة من عمل مساهمي ويكي مصدر العربية، بترخيص CC BY-SA 4.0.
| الترخيص | CC BY-SA 4.0 للنصوص المنقولة من مساهمي ويكي مصدر العربية، وCC BY 4.0 للجداول والإحصاءات والفحوص، وApache-2.0 لشيفرة أداة البناء |
|---|---|
| الإصدار | v0.1.0 · الإصدار v0.1.0، المبني من ملف تفريغ ويكي مصدر العربية الصادر في 1 أكتوبر 2026 وويكي بيانات كما قُرئت من 30 إلى 31 أكتوبر 2026، وأداة البناء موسومة على GitHub وغير موجودة على PyPI بعد. |
| تاريخ النشر | |
| آخر تحديث | |
| لمن هذا الإصدار | الفرق التي تدرّب نماذج اللغة العربية مسبقًا أو تقيّمها على النصوص التراثية والحديثة المبكرة، والباحثون في الأدب العربي الذين يريدون أعمالًا كاملة مع أشخاصها وتواريخها ووضعها في الملك العام. |
| المستوى | متوسط |
أرقام رئيسية
تُحسب آليًا من الملفات المنشورة. يُقرأ كل رقم من ملف stats/stats.json أو MANIFEST.json أو qa/pd_audit.json أو qa/text_spotcheck.json في مجموعة البيانات على Hugging Face، ويُربط ببصمة SHA-256 للملف، ويسرد ملف MANIFEST.json كل ملف مع حجمه وبصمته وعدد صفوفه.
التنزيل والمعرّفات
| المكان | المحتوى |
|---|---|
| Hugging Face | مجموعة البيانات على Hugging Face |
| GitHub | أداة البناء على GitHub |
| huggingface.co | works-pd-core بصيغة JSON Lines (مضغوط gzip) |
| huggingface.co | الأعداد حسب الفئة والقاعدة والنوع (stats.json) |
| huggingface.co | الفحص المنفصل لقرارات الملك العام (pd_audit.json) |
| bayanatlabs.com | النصوص على مستوى الصفحة: أطلس الوثائق العربية |
ابدأ الاستخدام
حمّل أحد الأقسام بمكتبة datasets. ولإعادة البناء من ملف تفريغ، ثبّت أداة البناء من GitHub عند وسم الإصدار v0.1.0، فالحزمة غير موجودة على PyPI بعد.
from datasets import load_dataset
core = load_dataset("Bayanat-Labs/arabic-wikisource-pd", "works-pd-core", split="train")
print(core[0]["title"], core[0]["author"], len(core[0]["chapters"]))
pip install "git+https://github.com/Bayanat-Labs/arabic-wikisource-pd@v0.1.0"
arabic-wikisource-pd fetch --date 20261001
arabic-wikisource-pd wikidata --date 20261001
arabic-wikisource-pd build --date 20261001
ما الذي يتضمنه الإصدار
| الجزء | الترخيص | ضمن الإصدار |
|---|---|---|
| works-pd-core: صف لكل عمل توفي كل مؤلفيه ومترجميه ومحققيه سنة 1955 أو قبلها، مع النص والفصول والأبيات والحواشي والأشخاص والتواريخ وصفحات المصدر | CC BY-SA 4.0 | نعم |
| works-life50: أعمال آخر وفاة فيها بين 1956 و1975، في الملك العام حيث تنتهي الحماية بعد 50 سنة من الوفاة، وليست كذلك حيث تمتد 70 سنة | CC BY-SA 4.0 | نعم |
| تصدير works-pd-core بصيغة JSON Lines، عمل واحد في كل سطر | CC BY-SA 4.0 | نعم |
| جدولا authors وpd_decisions (بقواعد مثل all-died-by-1955 وlatest-death-1956-1975 وdeath-after-1975 وanonymous-not-pre-1900 وtranslation-no-translator)، والإحصاءات والفحوص | CC BY 4.0 | نعم |
| شيفرة أداة البناء على GitHub | Apache-2.0 | نعم |
صيغة النسبة: Text: Arabic Wikisource contributors, CC BY-SA 4.0 (each record links its pages and their history). Dataset: Arabic Wikisource Public-Domain Works by Bayanat Labs. https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd
الاستخدامات المقصودة
- تدريب نماذج اللغة العربية مسبقًا أو تقييمها على أعمال كاملة ببنية فصولها، مع الإبقاء على النسبة إلى مساهمي ويكي مصدر العربية وفق CC BY-SA 4.0.
- اختيار الأعمال حسب فئة الملك العام المناسبة لبلدك: works-pd-core، أو works-life50 حيث تنتهي الحماية بعد 50 سنة من الوفاة فقط.
- دراسة النصوص العربية حسب المؤلف أو قرن الوفاة أو النوع أو حالة التدقيق، مع روابط إلى كل صفحة مصدر ومراجعتها.
خارج النطاق
- عدّ الفئات استشارة قانونية: فهي قواعد تُطبَّق على التواريخ المسجّلة في ويكي بيانات وويكي مصدر.
- استخدام works-life50 حيث تمتد الحماية 70 سنة بعد الوفاة، كما في الدول الأعضاء في الاتحاد الأوروبي.
- أعمال التعرّف الضوئي أو الصور على مستوى الصفحة: النصوص على مستوى الصفحة مع صورها في أطلس الوثائق العربية.
الحقوق باختصار
التدريب والعرض وإعادة التوزيع وإنشاء الأصوات الاصطناعية أذونات منفصلة.
| الاستخدام | الحالة | ملاحظة |
|---|---|---|
| التدريب | مسموح | النصوص المنقولة بترخيص CC BY-SA 4.0 من ويكي مصدر العربية، مع الإبقاء على النسبة وشرط المشاركة بالمثل. والأعمال الأصلية في الملك العام وفق الفئة الموصوفة. |
| العرض | مسموح | مع النسبة إلى مساهمي ويكي مصدر العربية وروابط إلى الصفحات (CC BY-SA 4.0)، والجداول بترخيص CC BY 4.0 مع النسبة إلى المصدر. |
| إعادة التوزيع | مسموح | النصوص بترخيص CC BY-SA 4.0 (المشاركة بالمثل)، وجدولا authors وpd_decisions والإحصاءات والفحوص بترخيص CC BY 4.0، وشيفرة أداة البناء بترخيص Apache-2.0. |
| الصوت الاصطناعي | لا ينطبق | لا يتضمن ملفات صوتية. |
القيود
- نُقلت نصوص كثيرة من طبعات حديثة لا يُذكر محققوها، والفئة تقوم على من ذُكروا فقط، فقد تبقى في النص تعليقات محقق حديث غير مذكور أو تصحيحاته.
- تُحذف مقدمات المحققين المحدثين حين يكون عنوانها دالًّا على ذلك، وتبقى في النص المقدمة التي تحمل عنوانًا آخر.
- لا يُعدّ العمل ترجمة إلا إذا دلّ على ذلك تصنيف أو ويكي بيانات أو اللغات المسجّلة للمؤلف، ولا يُعرف مترجمه إلا إذا ذكرته ويكي بيانات (في عنصر النسخة العربية) أو ترويسة الصفحة أو صفحة الفهرس أو العنوان أو أول سطور النص؛ والترجمة الحديثة لعمل قديم التي لا تحمل أيًّا من هذه الإشارات تُحسم بتواريخ المؤلف الأصلي.
- تُحسم الدورية أو المجموعة عملًا واحدًا، فيكفي مساهم واحد متأخر الوفاة لاستبعادها كلها.
- يصف ويكي مصدر 36 عملًا منشورًا بأنه غير مكتمل، وفي 29 عملًا ترميز ويكي لم يُغلق.
- لا يضم ملف التفريغ النص الذي تأخذه الصفحات من وحدات Lua أو من القوالب، كصفحات القرآن، فلا يُضمَّن.
- معظم الأعمال المنشورة شعر، والنثر الحديث جزء صغير منها، والأنواع مستخلصة بقواعد لا بقراءة النصوص.
- الأعداد والنصوص والتواريخ هي ما في ملف التفريغ الصادر في 1 أكتوبر 2026، مع ويكي بيانات كما قُرئت من 30 إلى 31 أكتوبر 2026؛ وأجرت Bayanat Labs الفحوص، ولم يراجع أي شخص النصوص أو القرارات.
المصادر والتراخيص
| المصدر | الترخيص | يُعاد توزيعه هنا |
|---|---|---|
| Arabic Wikisource dump of 1 October 2026 (arwikisource-20261001: pages-articles, page_props, categorylinks and linktarget) | CC BY-SA 4.0، والنصوص المنقولة يعاد نشرها مع النسبة وروابط الصفحات | نعم |
| Wikidata (authors, translators, editors and death dates), read through its API from 30 to 31 October 2026 | CC0 1.0 | نعم |
| arabic-normalize 0.1.0, policy bayanat-norm-v1, for text_norm and the word counts | Apache-2.0، ويُستخدم لبناء الإصدار ولا يُضمَّن | لا |
تأتي النصوص من ملف تفريغ ويكيميديا وحده، وبصمات ملفات التفريغ مسجّلة في PROVENANCE.jsonl. وقُرئت ويكي بيانات عبر واجهتها البرمجية بوكيل المستخدم الخاص بالبيانات المفتوحة من Bayanat Labs، بطلب واحد في الثانية. ولا تتضمن البيانات أي أسماء لحسابات المساهمين. وويكي مصدر وويكي بيانات علامتان تجاريتان لمؤسسة ويكيميديا، ولا صلة لهذه المجموعة بها ولا تؤيدها المؤسسة. ومن Bayanat Labs أيضًا: أطلس الوثائق العربية، وفيه النصوص على مستوى الصفحة مع حالة تدقيقها. تفاصيل المصادر (بالإنجليزية)
طريقة الاستشهاد
صيغة الاستشهاد:
Bayanat Labs (2026). Arabic Wikisource Public-Domain Works, version 0.1.0 (Arabic Wikisource dump of 2026-10-01; text by Arabic Wikisource contributors, CC BY-SA 4.0). Bayanat Labs. https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd
لا يوجد معرّف DOI. استشهد بالرابط الوارد في صيغة الاستشهاد أعلاه وبتاريخ اطلاعك عليه.
@misc{bayanatlabs2026arabicwikisourcepd,
author = {{Bayanat Labs}},
title = {Arabic Wikisource Public-Domain Works, version 0.1.0 (Arabic Wikisource dump of 2026-10-01; text by Arabic Wikisource contributors, CC BY-SA 4.0)},
year = {2026},
month = oct,
howpublished = {\url{https://huggingface.co/datasets/Bayanat-Labs/arabic-wikisource-pd}}
}
كيف نتعامل مع الاستشهاد (بالإنجليزية)
سجل التغييرات
| التاريخ | الإصدار | التغيير |
|---|---|---|
| v0.1.0 | فئتا الملك العام وجدولا المؤلفين والقرارات وتصدير JSON Lines والإحصاءات والفحوص على Hugging Face، وأداة البناء على GitHub. |
التصحيح وطلبات الإزالة
إذا وجدت في هذا الإصدار ما لا ينبغي وجوده أو ما يحتاج إلى تصحيح، فراسلنا على hello@bayanatlabs.com. نعالج طلبات الإزالة خلال 30 يومًا، وطلبات المنصات خلال 24 ساعة. كيف تعمل طلبات الإزالة
المنتج المرتبط: Bayanat Knowledge