Deepgram übernimmt Daily und gründet unabhängige Pipecat Foundation

Was der Deal für Daily und seine Kunden bedeutet

Laut Kramer wechselt das Daily-Team zu Deepgram und arbeitet weiter am Open-Source-Framework Pipecat sowie an der globalen Netzwerkinfrastruktur, auf der Echtzeit-Audio-, Video- und KI-Anwendungen laufen. Er beschrieb den Schritt als gemeinsame Wette: Beide Unternehmen glauben, dass jeder Entwickler und jedes Unternehmen in jedem Produkt Modelle, Echtzeit-Infrastruktur und Open-Source-Orchestrierung brauchen wird.

Kramer zufolge hat Kontinuität Priorität. „Für die Kunden von Daily und das Pipecat-Ökosystem ändert sich nichts“, schrieb er. Deepgram werde alle aktuellen Produkte und Dienste von Daily vertreiben, unterstützen und weiterentwickeln. Finanzielle Konditionen oder einen Zeitplan für den Abschluss nennt der Beitrag nicht.

Kramer sagt außerdem, die kommerziellen Produkte von Daily, darunter WebRTC, Telefonie und plattformübergreifende Bibliotheken, würden von der Mitarbeit des großen, weltweit aufgestellten Entwicklerteams von Deepgram profitieren.

Eine unabhängige Stiftung für Pipecat

Die zentrale Änderung bei der Governance ist die geplante Pipecat Foundation. Laut Kramer bleibt Pipecat Open Source und herstellerneutral, die Stiftung soll von einem Lenkungsausschuss geführt werden, der das gesamte Echtzeit-KI-Ökosystem repräsentiert. Dazu zählen auch Unternehmen, die mit Deepgram konkurrieren.

Gleichzeitig macht Deepgram Pipecat zum Kern seiner neuen Voice-AI-Produkte und -Dienste. Die Stiftungsstruktur soll die naheliegende Frage beantworten, die sich daraus ergibt: ob ein Framework, das viele Anbieter nutzen, neutral bleiben kann, wenn ein einzelnes Unternehmen seine Produkte darauf aufbaut.

Pipecats Reichweite und Ursprung

Kramer bezeichnet Pipecat als das meistgenutzte Framework für Sprachagenten und multimodale KI. Es löse Probleme wie den Wechsel zwischen Modellen, latenzarmen Netzwerktransport, das Streaming von Daten zwischen Modellen, Turn Detection, den Umgang mit Unterbrechungen, flexibles Kontextmanagement und asynchrone Tool-Aufrufe.

Daily hat Pipecat 2024 vollständig als Open Source veröffentlicht. Die Veröffentlichung umfasste:

• das zentrale Orchestrierungs-Framework
• clientseitige SDKs für jede Plattform und Sprache
• den Messaging- und Event-Standard RTVI
• das Modell Pipecat Smart Turn zur Turn Detection auf Basis nativer Audiodaten
• den SmallWebRTC-Transport
• die Context-Engineering-Bibliothek Pipecat Flows

Kramer zufolge hat Pipecat inzwischen mehr als 200 Integrationen und knapp 400 Mitwirkende, entwickelt wurde es von achtzehn Ingenieuren bei Daily. Es werde in Projekten von Sprachagenten für den Kundensupport bis hin zu Drohnen und Kinderspielzeug eingesetzt und laufe auf dem Gerät oder in lokalen und Cloud-Hybrid-Setups auf Desktop, iOS und Android. Er zitiert einen Partner, der Pipecat auf dem Weg zum „Linux für Echtzeit-KI“ sieht.

Eine lange Beziehung zwischen beiden Unternehmen

Daily und Deepgram haben 2016 gemeinsam Y Combinator durchlaufen, schreibt Kramer. Einige Jahre später begann die Zusammenarbeit, und seit 2019 steckt Deepgram hinter der Transkription in den Audio-Video-APIs von Daily. Deepgrams Fokus auf Transkription und Sprachgenerierung mit extrem niedriger Latenz habe dialogfähige Sprachagenten mit ermöglicht, und die Kunden des Unternehmens setzten KI-Agenten inzwischen im Produktivbetrieb ein: für Kundensupport, Reservierungen und Terminplanung, eingebettete Industriegeräte, Bildung und Robotik.

Daily begann 2023 mit dem Bau von Echtzeit-Sprachagenten, nachdem man zu dem Schluss gekommen war, dass Infrastruktur, die für die Kommunikation zwischen Menschen entstanden ist, auch für die Kommunikation zwischen Mensch und KI taugt. Kramer prognostiziert, dass die meisten Menschen künftig die meiste Zeit die meiste Software per Sprache bedienen werden. Vor achtzehn Monaten, so Kramer, seien Gespräche mit Unternehmenskunden meist darum gegangen, einen ersten Voice-Proof-of-Concept zu bauen. Heute verstünden Führungskräfte in jeder Branche, wie entscheidend Voice-AI-Kontaktpunkte zu Kunden seien.

Was das für Entwickler und den Markt heißt

Für Entwickler, die auf Pipecat aufbauen, lautet die erklärte Botschaft Stabilität: Der Code bleibt Open Source, die Governance geht an eine Stiftung mit breiter Vertretung, und die Entwickler hinter dem Projekt arbeiten weiter daran. Für die kommerziellen Kunden von Daily laufen die Produkte unter Deepgram weiter.

Für den Voice-AI-Markt verbindet der Deal einen Anbieter von Sprachmodellen mit einer Echtzeit-Netzwerk- und Orchestrierungsschicht. Kramer zufolge umfasst das gemeinsame Vorhaben Modelle, Inferenz-Infrastruktur, Netzwerk-Infrastruktur, Infrastruktur für das Hosting von Agenten, Orchestrierung und Tooling sowie Anwendungen. Das Ziel beschreibt er so: die Standards und das Standard-Toolkit für jede Software zu schaffen, in der ein Mensch beteiligt ist. Wie unabhängig die Stiftung in der Praxis sein wird, hängt von Details wie der Besetzung des Ausschusses ab, die der Beitrag noch nicht näher ausführt.