Markdown-Ausgabe

AI-translated from English; not yet reviewed by a fluent editor.

# Microsoft MAI-Transcribe-2-Streaming: Live-Transkription und ihre Grenzen

> Microsofts neues Streaming-Transkriptionsmodell liefert während der Audioeingabe zunächst vorläufigen und dann endgültigen Text. Bei der Preview-API überlässt Microsoft außerdem dem Client, Sprechabschnitte zu erkennen und die Transkription abzuschließen.

By BIG CHANGE Editorial

Published: 2026-10-02T18:45:00.209Z
Updated: 2026-10-02T18:45:00.209Z
Canonical: https://bigchange.ai/blog/microsoft-mai-transcribe-2-streaming-integration

![Conceptual illustration of a microphone beside a tablet; a teal waveform leads to a faint provisional line of marks above a crisp final line.](https://bigchange.ai/api/media/file/mai-transcribe-streaming-hero-v1.png)
AI-generated conceptual illustration by BIG CHANGE.

Microsoft [kündigte MAI-Transcribe-2-Streaming am 1. Oktober an](https://microsoft.ai/news/our-first-streaming-transcription-model/). Das Modell verarbeitet Audio während des Sprechens und liefert wechselnden Text, bevor ein endgültiges Transkript vorliegt. Für Entwickler, die einer Sprach-App Live-Untertitel oder Spracheingabe hinzufügen, ist entscheidend, wie die Aktualisierungen die App erreichen und wann sie als endgültig gelten können.

Dies ist ein dokumentationsbasierter Integrationsleitfaden für Entwickler, die die öffentliche Preview prüfen. Sie sollen entscheiden können, ob sie das Modell prototypisch testen und welche Client-Logik nötig ist, um Live-Text anzuzeigen und den endgültigen Text zu übernehmen. Microsoft dokumentiert den Verbindungsweg und Beispielcode; BIG CHANGE hat das Modell weder eingesetzt noch die Beispiele ausgeführt oder Genauigkeit und Latenz gemessen.

## Die große Änderung

- Microsoft hat ein Streaming-Modell eingeführt, das vorläufigen Text liefert, sobald Audio eingeht, und anschließend Transkriptabschnitte bestätigt. Der separate Dateitranskriptionsweg MAI-Transcribe-2 verarbeitet aufgezeichnetes Audio und dokumentiert andere Optionen.
- Eine App, die die Realtime API nutzt, muss korrekt formatiertes Audio senden, Änderungen am vorläufigen Textende verarbeiten und entscheiden, wann sie ein vollständiges Transkript anfordert. Davon hängt ab, was Nutzer sehen und ab wann sich nachgelagerte App-Logik auf den endgültigen Text verlassen kann.
- Das Streaming-Modell ist eine öffentliche Preview ohne Service Level Agreement. Microsoft empfiehlt es nicht für den Produktionseinsatz. Die genannten Angaben zu Geschwindigkeit und Genauigkeit stammen aus der Produkteinführung und aus Benchmarks; sie wurden in diesem Leitfaden nicht gemessen.

## Wählen Sie einen Verbindungsweg

Der [Microsoft-Foundry-Modellkatalog](https://ai.azure.com/catalog/models/MAI-Transcribe-2-Streaming?publisher=microsoft) führt das Modell `MAI-Transcribe-2-Streaming`, Version `2026-08-06`, als Preview-Modell mit Audioeingabe und Textausgabe auf. Microsofts [Übersicht vom 1. Oktober](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming) beschreibt zwei Integrationswege: eine Realtime API mit einem WebSocket-Protokoll ähnlich der OpenAI Realtime API oder das Azure Speech SDK. Beide liefern vorläufige und endgültige Erkennungsergebnisse. Das SDK verwaltet Verbindung und Audiostream; bei der Realtime API verarbeitet die App die Ereignisse direkt.

Für die [Realtime API](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-realtime) verlangt Microsoft ein Azure-Abonnement, eine Microsoft-Foundry-Ressource in einer unterstützten Region und ein Deployment des Streaming-Modells. Stellen Sie die Verbindung `wss://{your_resource_name}.services.ai.azure.com/mai/v1/realtime?intent=transcription` mit einem Microsoft-Entra-Bearer-Token oder API-Schlüssel her. Die Dokumentation empfiehlt die Entra-Authentifizierung. Sobald `session.created` eingegangen ist, senden Sie `session.update` mit dem Deploymentnamen und dem Eingabeformat. Nach dem ersten Audioanhängen lässt sich das Format nicht mehr ändern, auch nicht nach einem Commit.

Als Eingabe dient laut Dokumentation rohes, vorzeichenbehaftetes PCM16-Audio im Little-Endian-Format, mono und mit 16 oder 24 kHz, das als Base64-Blöcke in `input_audio_buffer.append`-Nachrichten übertragen wird. Die PCM-Daten enthalten keinen WAV-Header. Microsoft empfiehlt kleine Blöcke von etwa 10 bis 20 Millisekunden, um die Latenz zu verringern, weist aber darauf hin, dass größere Blöcke den Netzwerkaufwand senken. Das Python-Beispiel liest Mikrofon-Audio in 100-ms-Blöcken ein. Der Rat zu kleinen Blöcken auf der Dokumentationsseite und die Blockgröße im Beispiel sind unterschiedliche Optionen und kein Messergebnis von BIG CHANGE.

Der [Weg über das Speech SDK](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-speech-sdk) erfordert SDK v1.52.0, ein Azure-Abonnement sowie eine Foundry- oder Speech-Ressource. Im Python-Beispiel von Microsoft wird `speech_config.model` auf `MAI-Transcribe-2-Streaming` gesetzt. Es stellt 16-kHz-Mono-Audio mit 16 Bit über einen Push-Stream bereit und wartet auf `recognizing` sowie `recognized` Ereignisse. Das Beispiel verwendet eine vorhandene `audio.pcm`-Datei, um den Push-Stream zu veranschaulichen; eine App muss ihre eigene Audioquelle bereitstellen. Das sind dokumentierte Schnittstellen und erwartete Ereignistypen, kein Kompatibilitätstest mit einem echten Konto durch diese Redaktion.

## Vorläufigen und bestätigten Text getrennt behandeln

Die Bedeutung der Realtime-Ereignisse ist für eine Live-Oberfläche entscheidend. Ein `conversation.item.input_audio_transcription.delta`-Ereignis enthält neu endgültig erkannten Text, den der Client an den bestätigten Textpuffer anhängt, ohne die Abstände zu verändern. Ein `intermediate`-Ereignis enthält den gesamten aktuellen vorläufigen Textzusatz. Jeder neue Zusatz ersetzt den vorherigen. Auf dem Bildschirm können der bestätigte Textpuffer und dieser aktuelle Zusatz gemeinsam erscheinen. Werden alle Zwischenereignisse als neue Zeile gespeichert, wiederholen sich Wörter, wenn das Modell seine Erkennung korrigiert.

Der Client sendet `input_audio_buffer.commit` bei einer erkannten Sprechpause oder am Ende einer Aufnahme. Laut Microsoft fordert dies so bald wie möglich ein endgültiges Transkript an; `input_audio_buffer.committed` bestätigt den Commit und `conversation.item.input_audio_transcription.completed` liefert den vollständigen endgültigen Text für die Audioeingabe seit dem vorherigen Commit. Der [Leitfaden zur Realtime API](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-realtime) weist darauf hin, dass die Erkennung von Sprecherwechseln auf dem Server und automatische Commits für die Sitzungskonfiguration dieses Modells nicht verfügbar sind. Eine Sprach-App braucht daher selbst eine Pausen- oder Sprecherwechselerkennung, wenn sie Abschnitte automatisch abschließen soll. Die Dokumentation beschreibt den Ereignisvertrag, schreibt aber keine für alle Fälle geeignete Erkennungsmethode vor.

Der Leitfaden von Microsoft begrenzt jede Realtime-Sitzung auf eine Stunde. Ein angehängter Audioblock erhält demnach keine eigene Bestätigung und kann null, ein oder mehrere Transkriptionsereignisse auslösen. Wer einen Prototyp prüft, sollte unterscheiden, ob eine Audio-Nachricht eingegangen ist oder ob endgültiger Text vorliegt, und festlegen, wie die App mit einer unterbrochenen Sitzung umgeht. Das öffentlich verfügbare Python-Beispiel enthält eine Mikrofon-Warteschlange und Fehlerbehandlung; BIG CHANGE hat es nicht ausgeführt und daher auch kein tatsächliches Fehlerverhalten ermittelt.

## Zugang, Regionen und Preis

Microsoft zufolge ist das Modell weltweit verfügbar; Azure leitet Anfragen an Regionen mit Modellbereitstellung weiter. Die beiden Integrationsleitfäden vom 1. Oktober nennen unterschiedliche verfügbare Regionen: Der Realtime-Leitfaden führt Sweden Central, Central US und South India auf; der Speech-SDK-Leitfaden nennt Sweden Central, Central US und Southeast Asia. Beide listen East US 2 als demnächst verfügbar. Prüfen Sie die aktuellen Deployment- und Regionsoptionen für den gewünschten Verbindungsweg; die Seiten bieten keine einheitliche Liste. Die weltweite Verfügbarkeit garantiert keinen bestimmten Verarbeitungsstandort.

In der Ankündigung wird ein Einführungspreis von **0,54 US-Dollar pro Audiostunde bis Ende 2026** genannt. Rechnerisch entspricht das 9 US-Dollar pro 1.000 Audiominuten, ohne weitere Dienste oder Infrastruktur, die eine App nutzt. Microsoft verlinkt in den Anleitungen auf Foundry-Models- und Speech-Service-Preisseiten für die jeweiligen Wege. Die geprüften Quellen nennen weder einen Preis nach dem Einführungszeitraum noch eine tatsächlich abgerechnete Summe. Für die Budgetplanung einer Bereitstellung müssen Sie daher die aktuellen Preise prüfen.

Laut Microsoft unterstützt das Streaming-Modell 60 Sprachen mit fortlaufender automatischer Erkennung. Das erste vorläufige Ergebnis erscheine etwas mehr als 100 ms nach Eingang des Audios; außerdem beruft sich Microsoft für die Genauigkeit auf Artificial Analysis. [Der Streaming-Benchmark von Artificial Analysis](https://artificialanalysis.ai/speech-to-text/streaming) misst die Wortfehlerrate anhand gewichteter Datensätze mit insgesamt etwa acht Stunden Audiomaterial. Außerdem erfasst er die Zeit bis zu vorläufigen und endgültigen Ergebnissen, gemessen ab dem erkannten Ende der Spracheingabe. Das Ergebnis gilt für festgelegte Audiodaten und Zeitmessregeln. Es garantiert nicht, dass eine bestimmte App innerhalb von 100 ms korrekte Wörter anzeigt. Den konkreten Rang, den Microsoft für das Modell angibt, konnten wir anhand der öffentlich abgerufenen Benchmark-Daten nicht unabhängig überprüfen, da dort keine modellbezogene Ergebniszeile sichtbar war.

Der separate [Azure-Speech-Leitfaden für MAI-Transcribe-2](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe) dokumentiert Datei-Eingabe und Optionen wie Sprecherzuordnung, Zeitstempel auf Wortebene, Schlüsselwortgewichtung sowie bereinigte oder wortgetreue Transkription. Gehen Sie nicht davon aus, dass diese Funktionen mit MAI-Transcribe-2-Streaming verfügbar sind: Die Streaming-Anleitungen dokumentieren sie nicht. Wenn ein Produkt diese Ausgaben benötigt, prüfen Sie das Dateimodell oder bestätigen Sie die Streaming-Unterstützung anhand aktueller Dokumentation und eines Tests, bevor Sie die weitere Entwicklung davon abhängig machen.

## Quellen und weiterführende Informationen

- [Microsoft-KI-Ankündigung](https://microsoft.ai/news/our-first-streaming-transcription-model/), 1. Oktober 2026: Veröffentlichung, Sprachen, Geschwindigkeits- und Einführungspreisangaben. Die Aussagen von Microsoft zu Genauigkeit und interner Geschwindigkeit sind oben als Herstellerangaben gekennzeichnet.
- [Microsoft-Foundry-Modellkatalog](https://ai.azure.com/catalog/models/MAI-Transcribe-2-Streaming?publisher=microsoft), geprüft am 2. Oktober: Modellversion, Preview-Status, Ein- und Ausgabeformate; der Katalog enthält keinen Leistungstest.
- [Streaming-Übersicht](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming), [Leitfaden zur Realtime API](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-realtime) und [Leitfaden zum Speech SDK](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-speech-sdk), aktualisiert am 1. Oktober: die beiden dokumentierten Integrationswege, Preview-Bedingungen, Ereignisverhalten, Beispiele und Regionstabellen. BIG CHANGE hat die Beispiele nicht ausgeführt.
- [MAI-Transcribe-2 in Azure Speech](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe), geprüft am 2. Oktober: der separate Dateitranskriptionsweg und seine dokumentierten Optionen. Die Funktionsliste belegt keine Funktionsgleichheit mit dem Streaming-Modell.
- [Streaming-Benchmark von Artificial Analysis](https://artificialanalysis.ai/speech-to-text/streaming) und [Methodik](https://artificialanalysis.ai/methodology/speech-to-text), geprüft am 2. Oktober: unabhängiger Benchmark-Aufbau und Definitionen der Zeitmessung. Im abgerufenen öffentlichen Text war kein genaues, modellbezogenes Ergebnis für eine unabhängige Rangbestätigung zu sehen.

## Sources

- [Unser erstes Streaming-Transkriptionsmodell erreicht Platz 1 bei Artificial Analysis](https://microsoft.ai/news/our-first-streaming-transcription-model/) — Ankündigung von Microsoft AI mit Angaben zu 60 Sprachen und Geschwindigkeit, der Behauptung zum Ranking sowie dem Einführungspreis von 0,54 US-Dollar je Audiostunde bis Ende 2026. Herstellerangaben, keine Messungen von BIG CHANGE.
- [MAI-Transcribe-2-Streaming | Modellkatalog | Microsoft Foundry](https://ai.azure.com/catalog/models/MAI-Transcribe-2-Streaming?publisher=microsoft) — Offizieller Katalog: Modellversion 2026-08-06, Preview-Phase sowie Audioeingabe und Textausgabe. Die Versionsangabe ist vom Ankündigungsdatum zu unterscheiden.
- [Übersicht zu MAI-Transcribe-2-Streaming](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming) — Offizielle Übersicht, zuletzt aktualisiert am 1. Oktober: öffentliche Preview ohne SLA, nicht für den Produktionseinsatz empfohlen, zwei Integrationswege.
- [MAI-Transcribe-2-Streaming mit der Realtime API verwenden](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-realtime) — Offizieller Realtime-Leitfaden, zuletzt aktualisiert am 1. Oktober: Foundry-Deployment, WebSocket, PCM16, Ereignissemantik, manueller Commit, Sitzungen von einer Stunde und Regionsliste. BIG CHANGE hat das Beispiel nicht ausgeführt.
- [MAI-Transcribe-2-Streaming mit dem Azure Speech SDK verwenden](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe-2-streaming-speech-sdk) — Offizieller SDK-Leitfaden, zuletzt aktualisiert am 1. Oktober: v1.52.0, Push-Audio und Erkennungsereignisse. Die Regionstabelle weicht vom Realtime-Leitfaden ab. BIG CHANGE hat das Beispiel nicht getestet.
- [MAI-Transcribe in Azure Speech (Preview)](https://learn.microsoft.com/en-us/azure/ai-services/speech-service/mai-transcribe) — Separater Dateitranskriptionsweg MAI-Transcribe-2 mit eigenen Optionen. Die Quelle belegt keine Funktionsgleichheit mit dem Streaming-Modell.
- [Bestenliste und Vergleich von Spracherkennungsanbietern](https://artificialanalysis.ai/speech-to-text/streaming) — Der unabhängige Benchmark-Anbieter erläutert Wortfehlerrate im Streaming und Latenzmetriken. Der abgerufene öffentliche Text zeigte keine modellbezogene Ergebniszeile; Microsofts konkrete Rangangabe wird daher als Herstellerbehauptung gekennzeichnet und nicht unabhängig bestätigt.
- [Methodik für Spracherkennungs-Benchmarks](https://artificialanalysis.ai/methodology/speech-to-text) — Benchmark-Methodik für gestreamtes Audio, Datensätze, Gewichtung und Latenz. Benchmarks belegen weder die Latenz noch die Genauigkeit jeder einzelnen App.