---
title: "Was bedeutet multimodal bei KI? Text, Bild und Audio"
description: "Ein multimodales Modell nimmt mehr als eine Art Eingabe an: Text, Bilder, Video oder Audio. Was jede davon per API kostet und wie Sie Modelle verketten."
url: https://broadrouter.com/de/glossary/multimodal/
lang: de
updated: 2026-11-16
publisher: BroadRouter (a BroadNet site); API by BroadNet Inference, https://inference.broadnet.ai
---

Mit KI-Unterstützung aus dem Englischen übersetzt. [Englisches Original lesen](https://broadrouter.com/glossary/multimodal/) (aktualisiert am 2026-11-16).

# Multimodale KI (Multimodal AI)

Aktualisiert 2026-11-16

Multimodale KI ist ein Modell oder System, das mit mehr als einer Art von Daten arbeitet, etwa Text, Bildern, Video und Audio. Ein multimodales Modell kann zum Beispiel ein Foto zusammen mit einer Frage lesen oder Sprache entgegennehmen und als Text antworten. Ein Vision-Language-Modell ist die häufigste Art.

Auch genannt: multimodales Modell, multimodales KI-Modell, multimodale Eingabe, Multimodalität, Modalitäten, multimodal model, multimodal AI model, multimodal input, multi-modal, modalities

„Multimodal“ sagt Ihnen, was ein Modell entgegennehmen kann. Prüfen Sie immer die genaue Liste, denn zwei Modelle, die beide multimodal heißen, können recht unterschiedliche Eingaben akzeptieren.

## So funktioniert es

Jede Eingabeart wird in dasselbe umgewandelt, was das Sprachmodell ohnehin liest: eine Folge von Vektoren in seinem [Kontextfenster](https://broadrouter.com/de/glossary/context-window/). Text läuft durch den [Tokenizer](https://broadrouter.com/de/glossary/tokenizer/). Ein Bild läuft durch einen Vision-Encoder und wird zu einem Block aus Bild-Tokens. Video wird meist als Folge von Einzelbildern verarbeitet, Audio über einen Audio-Encoder.

Model Cards zeigen, wie genau das wird, sogar innerhalb einer Modellfamilie:

| Modell | Eingaben laut Model Card | Ausgabe |
| --- | --- | --- |
| Gemma 4 26B A4B | Text, Bild, Video als Einzelbilder; kein Audio (Google listet Audio nur für die Größen E2B, E4B und 12B) | Text |
| Qwen3.8 27B | Text, Bild, Video | Text |

Auch APIs teilen die Arbeit nach Endpoint auf. Der Audio-Leitfaden von OpenAI zum Beispiel schickt die Transkription von Dateien an einen Speech-to-Text-Endpoint und verweist Chat-Apps, die Audio brauchen, auf eine eigene Funktion für Audio im Chat.

Der engere Begriff für Text plus Bilder ist [Vision-Language-Modell](https://broadrouter.com/de/glossary/vision-language-model/).

## Warum es wichtig ist

-   **Kosten.** Eingaben, die kein Text sind, werden in Tokens umgerechnet oder pro Medieneinheit abgerechnet. Bei BroadNet verbraucht ein größeres Bild mehr Input-Tokens, verkleinern Sie es also auf die Detailtiefe, die Sie brauchen.
-   **Architektur.** Wenn kein einzelnes Modell alle Ihre Eingaben akzeptiert, verketten Sie Modelle: zuerst Speech-to-Text, dann ein Text- oder Vision-Modell.
-   **Qualitätsprüfung.** Eine gedruckte Rechnung, ein Diagramm oder eine handschriftliche Notiz zu lesen, sind verschiedene Fähigkeiten. Testen Sie die Modalität mit Ihren eigenen Dokumenten, nicht nur mit einem Demo-Bild.

## Bei BroadNet Inference

Die Dokumentation von BroadNet listet diese Eingaben pro Modell:

| Modell | Eingabe |
| --- | --- |
| DeepSeek V4.1 Flash | Text und Bilder |
| GLM 5.3 | Text |
| [Qwen3.8 27B](https://broadrouter.com/de/models/qwen3.8-27b/) | Text und Vision |
| [BroadNet Gemma 4 VL 26B](https://broadrouter.com/de/models/gemma-4-vl-26b/) | Text und Bilder |
| BroadNet Transcribe Arabic / BroadNet Transcribe | Audio, über `/v1/audio/transcriptions` |

Bilder gehen an `/v1/chat/completions`, als `data:`\-URL in der Content-Liste der Nachricht; die [Anleitung zu arabischen Rechnungen](https://broadrouter.com/de/guides/read-arabic-invoices-with-vision/) hat ein vollständiges Beispiel. Audio ist eine eigene Anfrage: WAV oder MP3 bis 26.214.400 Bytes, mit gesetztem `language`, wie in der [Anleitung zu WhatsApp-Sprachnachrichten](https://broadrouter.com/de/guides/transcribe-whatsapp-voice-notes/). Ein Assistent für Sprachnachrichten macht daher zwei Aufrufe: erst transkribieren, dann chatten.

## Häufige Fragen

### Ist ein Vision-Language-Modell multimodal?

Ja. Ein Vision-Language-Modell ist die häufigste Art multimodaler Modelle und nimmt Text und Bilder an. Multimodal ist der weitere Begriff und umfasst auch Audio und Video.

### Kann ich bei BroadNet Audio an ein Chat-Modell schicken?

Die Dokumentation von BroadNet führt Audio nur am Transkriptions-Endpoint. Transkribieren Sie das Audio zuerst und senden Sie dann den Text an ein Chat-Modell.

### Kosten Bilder mehr als Text?

Bei Pay-as-you-go-Schlüsseln von BroadNet wird ein Bild als Input-Tokens zum Input-Preis des Modells abgerechnet, und ein größeres Bild verbraucht mehr Tokens. In einem Plan sind Bilder im Pauschalpreis enthalten.

## Siehe auch

-   [Vision-Language-Modell (VLM)](https://broadrouter.com/de/glossary/vision-language-model/) (Begriff)
-   [Texterkennung (OCR)](https://broadrouter.com/de/glossary/ocr/) (Begriff)
-   [Speech-to-Text (Spracherkennung)](https://broadrouter.com/de/glossary/speech-to-text/) (Begriff)
-   [Token](https://broadrouter.com/de/glossary/token/) (Begriff)
-   [Kontextfenster (Context Window)](https://broadrouter.com/de/glossary/context-window/) (Begriff)
-   [Arabische Rechnungen und Belege mit einem Vision-Modell auslesen](https://broadrouter.com/de/guides/read-arabic-invoices-with-vision/) (Anleitung)
-   [WhatsApp-Sprachnachrichten per API in Text umwandeln](https://broadrouter.com/de/guides/transcribe-whatsapp-voice-notes/) (Anleitung)
-   [Rechnungs-, Beleg- und Formulardaten mit einem Vision-LLM als JSON](https://broadrouter.com/de/blog/extract-data-from-documents-with-vision-llm/) (Artikel)
-   [Günstigste Vision-LLM-API: Kosten pro Bild und pro Seite berechnet](https://broadrouter.com/de/blog/cheapest-vision-llm-api/) (Artikel)

Testen Sie es mit Ihrem echten Workload. Neue Konten starten mit USD 5 Guthaben für Gemma und Transkription. DeepSeek, GLM und Qwen3.8 erfordern eine Aufladung.

[Loslegen](https://inference.broadnet.ai/account/?utm_source=broadrouter&utm_medium=referral&utm_campaign=de-glossary-multimodal&utm_content=page-cta) ·

**Quellen**

-   [Model Card auf Hugging Face, google/gemma-4-26B-A4B-it (Modalitäten nach Modellgröße) (geprüft am 2026-11-16)](https://huggingface.co/google/gemma-4-26B-A4B-it)
-   [Model Card auf Hugging Face, Qwen/Qwen3.8-27B (Bild- und Videoeingabe) (geprüft am 2026-11-16)](https://huggingface.co/Qwen/Qwen3.8-27B)
-   [OpenAI, Leitfaden zu Audio und Sprache (Transkription vs. Audio im Chat) (geprüft am 2026-11-16)](https://developers.openai.com/api/docs/guides/audio)
-   [API-Referenz von BroadNet Inference, Modelle und Modalitäten (geprüft am 2026-11-16) (auf Englisch)](https://inference.broadnet.ai/docs?utm_source=broadrouter&utm_medium=referral&utm_campaign=de-glossary-multimodal&utm_content=sources)
