---
title: "ما هو توحيد النص العربي؟ قواعده للبحث وRAG | BroadRouter"
description: "توحيد النص العربي يجمع صيغ الكتابة المختلفة، كأشكال الألف والتطويل والتشكيل، في صيغة واحدة كي تتطابق نتائج البحث وRAG وحساب WER. القواعد والمفاضلات."
url: https://broadrouter.com/ar/glossary/arabic-text-normalization/
lang: ar
updated: 2026-11-15
publisher: BroadRouter (a BroadNet site); API by BroadNet Inference, https://inference.broadnet.ai
---

تُرجمت هذه الصفحة من الإنجليزية بمساعدة الذكاء الاصطناعي. [اقرأ الأصل الإنجليزي](https://broadrouter.com/glossary/arabic-text-normalization/) (حُدّث في 2026-11-15).

# توحيد النص العربي (Arabic text normalization)

آخر تحديث 2026-11-15

توحيد النص العربي هو الخطوة التي تحوّل الصيغ الإملائية المختلفة للكلمة نفسها إلى صيغة واحدة قبل المطابقة: حذف التشكيل والتطويل، وتوحيد أشكال الألف، وغالبًا تحويل ى إلى ي وة إلى ه. ويُطبَّق على مفاتيح البحث والتقييم، لا على النص الذي تعرضه.

يُسمّى أيضًا: توحيد النص العربي، تطبيع النص العربي، توحيد الألف، توحيد الهمزات، التطويل، الكشيدة، Arabic normalization، Arabic text normalization، alef normalization، orthographic normalization، tatweel، kashida، alef variants

يكتب المستخدمون العرب الكلمة نفسها بعدة طرق. والتوحيد يجعل هذه الصيغ تتطابق.

## كيف يعمل

التوحيد مجموعة من عمليات استبدال الحروف تُطبَّق على النص المخزّن وعلى الاستعلامات معًا. ويسرد ArabicNormalizer في Apache Lucene، المستخدم في كثير من محركات البحث، خمس قواعد:

1.  الهمزة على الألف تصبح ألفًا مجرّدة؛
2.  التاء المربوطة (ة) تصبح هاء (ه)؛
3.  الياء غير المنقوطة، أي الألف المقصورة (ى)، تصبح ياء (ي)؛
4.  حذف الحركات ([التشكيل](https://broadrouter.com/ar/glossary/arabic-diacritics/))؛
5.  حذف التطويل، وهو «حرف المدّ».

وتقدّم CAMeL Tools الأفكار نفسها في دوال منفصلة. فالدالة `normalize_alef_ar` تحوّل إ أ ٱ آ (U+0625 وU+0623 وU+0671 وU+0622) إلى ا، و`normalize_alef_maksura_ar` تحوّل ى إلى ي، و`normalize_teh_marbuta_ar` تحوّل ة إلى ه. أما `normalize_unicode` فتشغّل NFKC افتراضيًا، وهذا هو [توحيد Unicode](https://broadrouter.com/ar/glossary/unicode-normalization/) الذي يجب أن يأتي أولًا.

والتطويل (U+0640، ويسمّى أيضًا الكشيدة) حرف وصل يصفه معيار Unicode لأغراض ضبط المحاذاة: إدخاله بين الحروف يمدّ السطر. ولا يحمل أي معنى، لذا يجب أن تتطابق كتـــاب وكتاب.

مثال تطبيقي:

| المدخل | بعد التوحيد | القواعد المستخدمة |
| --- | --- | --- |
| إِسْلامٌ | اسلام | التشكيل، الألف |
| مدرسة | مدرسه | التاء المربوطة |
| مستشفى | مستشفي | الألف المقصورة |
| كتـــاب | كتاب | التطويل |

## لماذا يهم

وحّد Larkey وBallesteros وConnell (2002) مجموعة الأخبار العربية في TREC-2001 بحذف علامات الترقيم والتشكيل وما ليس حروفًا، واستبدال عدة صيغ لبعض الحروف بصيغة واحدة. ورفع التوحيد وحده متوسط الدقة في الاسترجاع أحادي اللغة من 0.194 إلى 0.238. ثم بلغ مجذّعهم light8 فوق ذلك 0.376.

وينطبق الشيء نفسه على:

-   **[RAG](https://broadrouter.com/ar/glossary/rag/) والبحث بالكلمات المفتاحية.** الاستعلام المكتوب بلا همزة يجب أن يجد المستند المكتوب بها. راجع [البحث في RAG العربي](https://broadrouter.com/ar/blog/arabic-rag-search/).
-   **[معدل الخطأ في الكلمات](https://broadrouter.com/ar/glossary/word-error-rate/).** تعتمد نتائج التعرف على الكلام العربي على ما إذا كانت النصوص المرجعية والنصوص المفرّغة قد وُحّدت بالطريقة نفسها. ويبيّن [شرح WER للعربية](https://broadrouter.com/ar/blog/arabic-asr-wer-explained/) هذا الأثر.
-   **إزالة التكرار والتحليلات.** عدّ الكلمات أو مصطلحات المستخدمين بلا توحيد يقسم الكلمة الواحدة إلى عدة كلمات.

والثمن هو دمج كلمات مختلفة. فتوحيد الألف يجعل الأداتين المختلفتين إن وأن سلسلة واحدة، وقاعدة ة إلى ه تدمج كرة (الكرة) مع كره (البغض). تعامل مع قواعد [الهمزة](https://broadrouter.com/ar/glossary/hamza/) و[التاء المربوطة](https://broadrouter.com/ar/glossary/taa-marbuta/) على أنها قابلة للضبط.

## في BroadNet Inference

يجري التوحيد في شيفرتك، لا في الواجهة. فنقاط نهاية المحادثة والتفريغ الصوتي في BroadNet تأخذ نصك أو صوتك كما هو. احتفظ بنسختين: الأصل للنموذج وللمستخدم، ومفتاح موحّد للمطابقة.

وتطبّق [أداة توحيد النص العربي](https://broadrouter.com/tools/arabic-text-normalizer/) المجانية هذه القواعد في المتصفح لترى ما تغيّره كل قاعدة. ويحتوي [دليل التوحيد](https://broadrouter.com/ar/blog/arabic-text-normalization-search/) على شيفرة Python مختبرة ونقاش لكل قاعدة على حدة.

## أخطاء شائعة

-   توحيد المستندات دون الاستعلامات، أو العكس.
-   عرض النص الموحّد على المستخدمين أو الاقتباس منه.
-   خلط مكتبات تختلف قواعدها، كأن يكون لـ ى تحويلان مختلفان.

## أسئلة شائعة

### هل يفيد التوحيد في البحث بالتضمينات أيضًا؟

النتائج الكلاسيكية قيست على البحث بالكلمات المفتاحية. أما مع التضمينات، فاختبر المدخلات الموحّدة والأصلية على استعلاماتك أنت قبل أن تقرر.

### هل أوحّد النص قبل إرساله إلى نموذج اللغة؟

غالبًا لا. أرسل النص الأصلي كي يرى النموذج الإملاء الحقيقي والهمزات والتشكيل. وحّد فقط النسخ التي تطابقها أو تفهرسها أو تقيّمها.

### هل تطبّق كل المكتبات القواعد نفسها؟

لا. تحوّل CAMeL Tools وLucene كلتاهما الألف المقصورة إلى ياء والتاء المربوطة إلى هاء، لكن مكتبات أخرى تختلف. اختر مجموعة قواعد واحدة وطبّقها على المستندات والاستعلامات معًا.

## انظر أيضًا

-   [التشكيل (الحركات العربية، Arabic diacritics)](https://broadrouter.com/ar/glossary/arabic-diacritics/) (مصطلح)
-   [الهمزة (Hamza)](https://broadrouter.com/ar/glossary/hamza/) (مصطلح)
-   [التاء المربوطة (ة، Taa marbuta)](https://broadrouter.com/ar/glossary/taa-marbuta/) (مصطلح)
-   [توحيد Unicode (Unicode normalization)](https://broadrouter.com/ar/glossary/unicode-normalization/) (مصطلح)
-   [RAG (التوليد المعزّز بالاسترجاع)](https://broadrouter.com/ar/glossary/rag/) (مصطلح)
-   [معدل الخطأ في الكلمات (WER)](https://broadrouter.com/ar/glossary/word-error-rate/) (مصطلح)
-   [توحيد النص العربي للبحث وRAG: ما الذي تغيّره وما الذي تتركه](https://broadrouter.com/ar/blog/arabic-text-normalization-search/) (مقال)
-   [RAG للعربية: التطبيع والتقطيع والاسترجاع الذي ينجح فعلًا](https://broadrouter.com/ar/blog/arabic-rag-search/) (مقال)
-   [معدل خطأ الكلمات (WER) في التعرّف على الكلام العربي: شرح مبسّط](https://broadrouter.com/ar/blog/arabic-asr-wer-explained/) (مقال)

جرّبه على مهامك الفعلية. تبدأ الحسابات الجديدة برصيد قدره $5 لاستخدام Gemma والتفريغ الصوتي. أما DeepSeek وGLM وQwen3.8 فتتطلب شحن الرصيد.

[ابدأ الآن](https://inference.broadnet.ai/account/?utm_source=broadrouter&utm_medium=referral&utm_campaign=ar-glossary-arabic-text-normalization&utm_content=page-cta) ·

**المصادر**

-   [وثائق CAMeL Tools، camel\_tools.utils.normalize (تاريخ المراجعة 2026-11-15)](https://camel-tools.readthedocs.io/en/latest/api/utils/normalize.html)
-   [الشيفرة المصدرية لـ CAMeL Tools، normalize.py (قواعد الألف والألف المقصورة والتاء المربوطة) (تاريخ المراجعة 2026-11-15)](https://raw.githubusercontent.com/CAMeL-Lab/camel_tools/master/camel_tools/utils/normalize.py)
-   [Apache Lucene 9.0 API، ArabicNormalizer (تاريخ المراجعة 2026-11-15)](https://lucene.apache.org/core/9_0_0/analysis/common/org/apache/lucene/analysis/ar/ArabicNormalizer.html)
-   [Larkey وBallesteros وConnell، Improving Stemming for Arabic Information Retrieval (SIGIR 2002) (تاريخ المراجعة 2026-11-15)](https://ciir-publications.cs.umass.edu/pub/web/getpdf.php?id=249)
-   [معيار Unicode 18.0، الفصل 9 الشرق الأوسط 1، العربية (التطويل) (تاريخ المراجعة 2026-11-15)](https://www.unicode.org/versions/Unicode18.0.0/core-spec/chapter-9/)
