BroadRouter

Golf-, ägyptisches und levantinisches Arabisch: Dialekte in LLMs

Vom Team von BroadNet Inference · 6 Min. Lesezeit · Veröffentlicht

LLMs verarbeiten arabische Dialekte ungleichmäßig: Ägyptisches und Golf-Arabisch verstehen sie meist besser, als sie es schreiben, und bei selteneren Dialekten sinkt die Qualität. Testen Sie Verstehen und Schreiben getrennt an Ihren eigenen Nachrichten. In BroadNets eigenen Tests verstand Qwen3.8 27B Golf- und ägyptischen Dialekt und schrieb flüssiges Arabisch. Es kostet $0.175 pro 1 Mio. Input-Tokens.

LLMs verstehen Golf- und ägyptisches Arabisch meist besser, als sie es schreiben, und schneiden bei selteneren Dialekten schlechter ab. Ein Kunde in Riad, einer in Kairo und einer in Beirut können alle „Was möchten Sie?“ in drei verschiedenen Sätzen fragen, und ein Modell, das modernes Hocharabisch (MSA) gut beherrscht, kann sie trotzdem falsch lesen. Testen Sie Verstehen und Schreiben getrennt.

Dieser Beitrag zeigt, was sich zwischen den großen Dialektgruppen ändert, wo LLMs typischerweise scheitern und wie Sie ein Modell testen, bevor Sie ihm echte Kunden anvertrauen.

Wie verschieden sind die Dialekte wirklich?

Sehr verschieden bei Alltagswörtern, deutlich näher beim formellen Wortschatz. Forschungskorpora zeigen das Ausmaß: Das MADAR-Korpus übersetzte dieselben Reisesätze in die Dialekte von 25 arabischen Städten. Die Tabelle zeigt einige häufige Wendungen. Die MSA-Spalte entspricht dem, was ein Lehrbuch drucken würde; die anderen sind typische gesprochene und getippte Formen. Die Schreibung schwankt von Person zu Person, was Teil des Problems ist.

Bedeutung MSA Golf (Saudi-Arabien / VAE) Ägyptisch Levantinisch
Was möchtest du? ماذا تريد؟ وش تبي؟ / شو تبي؟ عايز إيه؟ شو بدّك؟
Wie geht es dir? كيف حالك؟ شلونك؟ إزيك؟ كيفك؟
jetzt الآن الحين دلوقتي هلّق
Ich weiß nicht لا أعرف ما أدري مش عارف ما بعرف
sehr / viel جداً وايد أوي كتير

Drei Muster sind für LLMs wichtig:

  • Funktionswörter ändern sich. Fragewörter, Verneinung und „wollen“ unterscheiden sich zwischen den Dialekten vollständig. Das sind kurze, häufige Wörter, die über die Bedeutung des Satzes entscheiden; liest man eines falsch, kippt der Intent.
  • Die Schreibung ist nicht standardisiert. Dialekte werden überwiegend gesprochen, also schreiben Menschen sie so, wie sie klingen. Dasselbe Wort kann mit anderen Buchstaben, mit oder ohne Hamza oder in lateinischer Schrift (Arabizi) auftauchen.
  • Code-Switching ist normal. Geschäftliche Nachrichten vom Golf mischen englische Produktnamen ein; Sprecher aus der Levante und dem Maghreb mischen Französisch ein. Ein Modell muss mit beiden Schriften in einem Satz zurechtkommen.

Wo scheitern LLMs an arabischen Dialekten?

Modelle lernen aus dem Text, den sie sehen, und für kleinere Dialekte wie Emiratisch oder Sudanesisch gibt es weit weniger öffentlichen Text als für modernes Hocharabisch. In der Praxis zeigt sich das in einigen wiederkehrenden Fehlern:

  1. Ein Dialektwort als anderes MSA-Wort lesen. Das Golf-Wort „أبي“ (ich will) sieht aus wie MSA „أبي“ (mein Vater). Der Kontext klärt das meist, kleine Modelle aber nicht immer.
  2. Auf den falschen Intent antworten. Eine kurze ägyptische Beschwerde wie „الطلب لسه موصلش“ (die Bestellung ist immer noch nicht angekommen) verlangt, dass das Modell weiß, dass „لسه“ „immer noch“ bedeutet und „موصلش“ ein verneintes Verb ist.
  3. Einen Mischdialekt schreiben. Sollen sie „auf Golf-Arabisch“ antworten, erzeugen schwächere Modelle eine Mischung aus Ägyptisch, Levantinisch und MSA, die kein Muttersprachler schreiben würde. Das kommt häufiger vor als Missverständnisse.
  4. Überkorrigieren. Manche Modelle „verbessern“ den Dialekt des Kunden zu MSA, wenn Sie ein Zitat verlangt haben, was Extraktionsaufgaben kaputt macht.

Die allgemeine Regel: Modelle verstehen Dialekte besser, als sie sie schreiben. Planen Sie Ihr Produkt danach.

Was hat BroadNet zu arabischen Dialekten getestet?

BroadNet veröffentlicht seine eigene Arabisch-Prüfung auf seiner Preisseite. Für Qwen3.8 27B meldet es:

  • flüssiges Schreiben auf Arabisch,
  • Verständnis von Golf- und ägyptischem Dialekt,
  • genaue Übersetzung zwischen Arabisch und Englisch.

Das ist, was BroadNet angibt, und nicht mehr. Es veröffentlicht kein Ergebnis für Levantinisch, Irakisch oder Maghrebinisch und keinen Wert für das Schreiben im Dialekt. Wenn Kunden aus der Levante für Sie zählen, testen Sie selbst mit der Methode unten.

Qwen3.8 27B nimmt Text und Bilder an, unterstützt Tools und strukturierte Ausgabe, denkt vor der Antwort nach und hat einen Kontext von 262.144 Tokens. Pro 1 Mio. Tokens kostet es $0.175 für Input und $2.17 für Output. Vergleichen Sie die anderen Chat-Modelle auf der Preisseite und lesen Sie eine LLM-API für Arabisch wählen für die umfassendere Checkliste, die auch Schreiben, Übersetzung und Dokumente abdeckt.

Wie promptet man ein LLM für einen bestimmten Dialekt?

Sagen Sie, welchen Dialekt Sie erwarten, welchen Sie zurückhaben wollen und wie formell es sein soll. Ein System-Prompt, der für ein saudisches Händler-Postfach gut funktioniert:

import os
from openai import OpenAI

client = OpenAI(base_url="https://inference.broadnet.ai/v1", api_key=os.environ["BROADNET_API_KEY"])

system = (
    "You are a customer-service assistant for a Saudi online store. "
    "Customers write in Gulf Arabic (often Saudi), MSA, English or Arabizi. "
    "Understand all of them. Reply in simple, polite Modern Standard Arabic, "
    "in two or three short sentences. If the customer writes in English, reply in English. "
    "Never invent order details."
)

response = client.chat.completions.create(
    model="broadnet/qwen3.8-27b",
    max_tokens=2000,  # the model reasons first; leave room for the answer
    messages=[
        {"role": "system", "content": system},
        {"role": "user", "content": "السلام عليكم، طلبي للحين ما وصل، وش السالفة؟"},
    ],
)
print(response.choices[0].message.content)

Die Kundennachricht ist Golf-Arabisch: „Hallo, meine Bestellung ist immer noch nicht angekommen, was ist los?“ Die Wörter „للحين“ (immer noch) und „وش السالفة“ (was ist die Geschichte / was ist los) sind Golf-Formen. Eine gute Antwort erkennt die Verzögerung auf MSA an und fragt nach der Bestellnummer.

Ein paar weitere Prompt-Gewohnheiten, die helfen:

  • Das Land nennen, nicht nur die Region. „Golf-Arabisch“ umfasst saudische, emiratische, kuwaitische, katarische, bahrainische und omanische Sprache, die sich unterscheiden. Wenn Sie den Markt kennen, sagen Sie ihn.
  • Bei Extraktionsaufgaben ein Dialekt-Label anfordern. Für Routing oder Analysen lassen Sie das Modell {"dialect": "gulf" | "egyptian" | "levantine" | "msa" | "other", "intent": ...} per strukturierter Ausgabe zurückgeben. So erfahren Sie günstig, wer Ihre Kunden sind.
  • Die Anweisungen in einer Sprache halten. Englische Anweisungen mit arabischem Inhalt funktionieren bei den meisten Modellen gut. Arabische Anweisungen funktionieren auch; beides in einem System-Prompt zu mischen, verwischt tendenziell das Register. Mehr dazu unter Prompt Engineering für Arabisch.

Sollten Sie überhaupt im Dialekt antworten?

Für die meisten Unternehmen: nein. Einfaches MSA (manchmal „weißes“ oder neutrales Arabisch genannt) versteht jeder arabische Leser, es wirkt professionell und vermeidet das Risiko einer Antwort, die nach dem falschen Land klingt. Antworten im Dialekt sind sinnvoll für informelle Marken, Marketingtexte für einen einzelnen Markt und Sprachprodukte, bei denen MSA steif klingt. Wenn Sie diesen Weg gehen, lassen Sie jede Woche eine Stichprobe der Ausgaben von Muttersprachlern genau dieses Dialekts prüfen.

Wie testet man den Umgang mit Dialekten an einem Tag?

  1. Echte Nachrichten sammeln. Nehmen Sie 30 bis 50 anonymisierte Nachrichten pro Dialekt aus Ihrem Postfach, Ihren Chat-Logs oder transkribierten Sprachnachrichten. Entfernen Sie Namen, Telefonnummern und Bestellnummern.
  2. Den Intent labeln. Notieren Sie zu jeder Nachricht den korrekten Intent und alle Fakten, die das Modell extrahieren soll (Bestellnummer, Produkt, Datum).
  3. Verstehen testen. Lassen Sie jedes Kandidatenmodell Intent und Felder als JSON zurückgeben. Zählen Sie exakte Treffer. Diese Zahl entscheidet, ob das Routing funktioniert.
  4. Schreiben testen. Fordern Sie für zehn Nachrichten pro Dialekt eine Antwort an. Lassen Sie einen Muttersprachler jede Antwort mit 1–3 für Korrektheit, Ton und Natürlichkeit bewerten. Bewerten Sie keinen Dialekt, den Sie nicht sprechen.
  5. Kosten und Geschwindigkeit prüfen. Erfassen Sie usage.prompt_tokens, usage.completion_tokens und die Latenz pro Aufruf. Dialekttext kann anders tokenisiert werden als MSA; messen Sie also, statt zu raten. Der kostenlose arabische Token-Zähler liefert eine schnelle erste Schätzung.
  6. Für jedes Modell wiederholen. Lassen Sie dasselbe Set auf Qwen3.8 27B, DeepSeek V4.1 Flash und GLM 5.3 laufen. Alle drei nutzen dieselbe OpenAI-kompatible API; nur die Modell-ID ändert sich.

Qwen3.8 27B, DeepSeek V4.1 Flash und GLM 5.3 funktionieren nach einer Aufladung; unter den Chat-Modellen deckt das kostenlose Startguthaben von $5 nur BroadNet Gemma 4 VL 26B ab, das sich als günstige Vergleichsbasis lohnt. Ein nützliches Ergebnis ist oft ein geteiltes Setup: ein Modell für Verstehen und Routing, Antworten auf MSA entworfen.

Was ist mit Dialekt in Sprachnachrichten?

Schicken Ihre Kunden Sprachnachrichten, beginnt der Umgang mit Dialekt früher, bei Speech-to-Text. Ein Transkriptionsmodell kann ein Dialektwort falsch hören, bevor das LLM es überhaupt sieht. BroadNet meldet für BroadNet Transcribe Arabic eine Wortfehlerrate von 23,4 bei Dialekt, gegenüber 3,8 bei vorgelesener Sprache auf FLEURS; was diese Zahlen bedeuten, steht unter arabische WER erklärt. Testen Sie die ganze Kette von der Sprachnachricht bis zur Antwort, nicht jedes Stück einzeln.

Häufige Fragen

Soll mein Chatbot im Dialekt des Kunden antworten?

Standardmäßig meist nicht. Einfaches modernes Hocharabisch wird überall verstanden und wirkt professionell. Antworten Sie nur dort im Dialekt, wo Ihre Markenstimme es verlangt, und erst nachdem Muttersprachler die Ausgaben geprüft haben.

Welches Modell hat BroadNet auf arabische Dialekte getestet?

Qwen3.8 27B. BroadNet meldet flüssiges Schreiben auf Arabisch, Verständnis von Golf- und ägyptischem Dialekt und genaue Übersetzung zwischen Arabisch und Englisch. Ein Ergebnis für Levantinisch oder Maghrebinisch hat es nicht veröffentlicht.

Wie viele Testnachrichten brauche ich pro Dialekt?

Dreißig bis fünfzig echte Nachrichten pro Dialekt reichen, um deutliche Unterschiede zwischen Modellen zu sehen. Nehmen Sie mehr für den Dialekt, den die meisten Ihrer Kunden verwenden.

Kosten Dialektnachrichten mehr Tokens?

Möglicherweise. Die Token-Zahl hängt von Tokenizer und Schreibung ab, und Dialekttext hat oft eine nicht standardisierte Schreibung. Fügen Sie Beispiele in einen Token-Zähler ein und bestätigen Sie es über prompt_tokens an Ihren eigenen Nachrichten, statt es anzunehmen.

Kann ein LLM ägyptisches Arabisch verstehen?

Oft, aber prüfen Sie es an Ihren eigenen Nachrichten. BroadNet berichtet, dass Qwen3.8 27B in seinen Tests ägyptisches und Golf-Arabisch verstand; andere Modelle schwanken. Dialekt zu schreiben ist meist weniger zuverlässig, als ihn zu lesen; bewerten Sie also Intent-Genauigkeit und Antwortqualität getrennt an 30 bis 50 echten Nachrichten.

Als Markdown lesenChatGPT fragenClaude fragenPerplexity fragen