Künstliche Intelligenz, aktuell.
Direkt aus den Originalmeldungen.

LiveKit Agents können jetzt über Recall.ai an Zoom, Meet und Teams teilnehmen

19. November 2026Von der KI Nachrichten RedaktionQuelle: LiveKit
LiveKit Agents können jetzt über Recall.ai an Zoom, Meet und Teams teilnehmen
Bild: LiveKit

LiveKit hat gezeigt, wie Entwickler LiveKit Agents über Recall.ai in Zoom-, Google-Meet- und Microsoft-Teams-Meetings einsetzen können. Die Integration lässt Agents die Unterhaltung in LiveKit verarbeiten, während Recall.ai die Meeting-Verbindung und zugehörige Steuerungsfunktionen übernimmt.

Das Wichtigste in Kürze
  • Recall.ai verbindet LiveKit Agents mit Zoom, Google Meet und Microsoft Teams.
  • LiveKit übernimmt die Unterhaltung, Sprachverarbeitung, Modellinferenz und Tool-Aufrufe.
  • Der Beispiel-Agent nutzt einen Runway-Avatar und kann Webseiten teilen sowie Chatnachrichten veröffentlichen.
  • Teilnehmer können den Agenten stummschalten, die Stummschaltung aufheben oder ihn auffordern, das Meeting zu verlassen.
  • Der Demo-Code ist im Recall.ai-LiveKit-Demo-Repository verfügbar.

Recall.ai verbindet Meetings mit LiveKit-Räumen

LiveKit Agents ist für die Entwicklung von sprachfähigen und multimodalen KI-Agenten ausgelegt, die in Echtzeit zuhören, antworten und Aktionen ausführen können. Mit der Recall.ai-Integration kann ein Agent an unterstützten Meeting-Plattformen teilnehmen, ohne dass Entwickler für jede einzelne Plattform eigene Integrationen erstellen und warten müssen.

Recall.ai verbindet seinen Bot mit einem Meeting und überträgt das Audio des Bots sowie die Medien des Agents in einen LiveKit-Raum. LiveKit übernimmt anschließend die Sprachverarbeitung, die Inferenz der Modelle und Tool-Aufrufe. Die Beispielanwendung nutzt einen LiveKit-Agenten mit einem Runway-Avatar, der an Google Meet teilnimmt, Fragen beantwortet, Webseiten teilt, Chatnachrichten veröffentlicht und auf Befehle der Teilnehmer reagiert.

Die Demonstration verwendet Google Meet, die zugrunde liegende Integration unterstützt jedoch auch Zoom und Microsoft Teams. Der Launcher ist derzeit für Google Meet konfiguriert. Für die anderen Plattformen müssten Entwickler daher Änderungen vornehmen.

Agents können Meeting-Aktionen mit Function Tools steuern

Das Beispiel umfasst zwei Prozesse: einen LiveKit-Worker, der den Agenten ausführt, und einen Python-Launcher, der den Recall.ai-Bot erstellt. Entwickler hinterlegen die Zugangsdaten ihres LiveKit-Projekts im Recall.ai-Arbeitsbereich und verwenden anschließend denselben Agentennamen im Launcher und im LiveKit-Worker.

Mit den Function Tools von LiveKit kann der Agent Python-Funktionen aufrufen, wenn Teilnehmer Anfragen stellen. In der Demo nutzen diese Funktionen die APIs von Recall.ai, um Webseiten zu teilen, Links im Chat zu veröffentlichen, den Agenten stummzuschalten oder die Stummschaltung aufzuheben und ihn das Meeting verlassen zu lassen. Ein Teilnehmer kann beispielsweise sagen: Assistant, share https://example.com. Der Agent sendet daraufhin eine Anfrage zur Bildschirmfreigabe an Recall.ai, das die Webseite rendert.

Die Kameraausgabe des Agenten verwendet die LiveKit-Integration, während die Webseitenfreigabe über das webseitenbasierte Output Media von Recall.ai erfolgt. Das Beispiel merkt sich außerdem die zuletzt geteilte URL. Dadurch kann ein Teilnehmer den Agenten auffordern, den Link im Chat zu senden, ohne ihn erneut nennen zu müssen. Die Tools validieren Anfragen und beschränken die Bildschirmfreigabe beispielsweise auf öffentliche HTTPS-URLs.

Die Demo bietet Funktionen zur Begrenzung von Unterbrechungen

Da ein Agent Gespräche hören kann, die nicht an ihn gerichtet sind, müssen Teilnehmer ihn im Beispiel mit „Assistant“ oder „livekit demo“ ansprechen. Das System prüft abgeschlossene Sprachtranskripte auf diese Begriffe, bevor es eine Anfrage an den Agenten sendet oder ihm erlaubt, eine laufende Antwort zu unterbrechen.

Die Demonstration trennt das Stummschalten vom Ignorieren von Anfragen. Beim Stummschalten spricht der Agent nicht, kann aber weiterhin Tools verwenden. Beim Ignorieren verhindert das System Antworten und Aktionen, bis ein Teilnehmer ihn ausdrücklich auffordert, wieder zuzuhören. Diese Verhaltensweisen sind spezifisch für das Beispiel und können für andere Anwendungen angepasst werden.

LiveKit zufolge ist der vollständige Code im Recall.ai-LiveKit-Demo-Repository verfügbar. Für die Ausführung sind Python 3.12, uv, ein Recall.ai-Arbeitsbereich mit aktivierter LiveKit-Integration, ein LiveKit-Cloud-Projekt mit Zugriff auf LiveKit Inference, ein Runway-API-Schlüssel mit Characters-Zugriff und einer Charaktervorlage sowie ein Google-Meet-Meeting zum Testen erforderlich. Der Launcher ist für lokale Tests gedacht und enthält keine Authentifizierung der Anwendung. Der Quellcode warnt daher davor, ihn öffentlich zugänglich zu machen.

Ähnliche Meldungen

Mastra ergänzt Observability-Alarme für Kosten, Fehler und Evaluierungswerte
Produkte und Tools19. November 2026

Mastra ergänzt Observability-Alarme für Kosten, Fehler und Evaluierungswerte

Mastra Platform ermöglicht Nutzern nun, Observability-Alarme für Modellkosten, Fehlerraten, Latenz, Token-Nutzung und Evaluierungswerte zu erstellen. Benachrichtigungen…

Resemble AI tritt Microsofts zertifiziertem Programm zur Deepfake-Erkennung in Teams bei
Produkte und Tools19. November 2026

Resemble AI tritt Microsofts zertifiziertem Programm zur Deepfake-Erkennung in Teams bei

Resemble AI wurde als zertifizierter Drittanbieter für die Deepfake-Erkennung in Microsoft Teams benannt. Damit können Unternehmen Resemble Meetings über das Teams Admin…

Databricks bringt kontrollierte Genie-Erkenntnisse in Teams, Copilot und Excel
Produkte und Tools18. November 2026, 17:00

Databricks bringt kontrollierte Genie-Erkenntnisse in Teams, Copilot und Excel

Databricks erweitert Genie auf Microsoft-Tools und bringt kontrollierte Antworten aus Azure Databricks in Microsoft Teams, Copilot Cowork, Copilot Chat, Excel und…