Convai startet On-Premise-KI-Plattform für Schulungen und Arbeitshilfe
Convai hat eine On-Premise-KI-Agentenplattform vorgestellt, die Mitarbeitende schulen und sie während ihrer Arbeit unterstützen soll. Die Plattform kann auf den eigenen Servern eines Unternehmens, in der Cloud oder in einem abgeschotteten Netzwerk betrieben werden und verbindet Agenten mit Dokumenten, CAD-Modellen und internen Systemen.
- Convais Plattform läuft auf den Servern, in der Cloud oder im abgeschotteten Netzwerk eines Kunden.
- Agenten können Dokumente, Videos, CAD-Modelle und interne Systeme nutzen.
- Die Produkte decken Webanwendungen, 3D-Simulationen, Kioske, CAD-Schulungen und Unterstützung bei der physischen Arbeit ab.
- SDKs unterstützen Unity, Unreal Engine, NVIDIA Omniverse und three.js.
- Zu den Zugriffskontrollen gehören Verzeichnisgruppen, vom Kunden ausgestellte Tokens und MCP-Verbindungen.
Ein Agent für Schulungen und den Arbeitsalltag
Convai zufolge wenden sich Beschäftigte bei Fragen häufig an dieselben internen Experten. Das führt sowohl bei den Hilfesuchenden als auch bei den Fachleuten, die Unterstützung leisten, zu Unterbrechungen. Die Plattform soll sowohl formelle Schulungen als auch das weniger strukturierte Lernen im Arbeitsalltag unterstützen, etwa an einer Maschine, innerhalb einer Anwendung oder während eines schwierigen Gesprächs.
Nach Angaben des Unternehmens sind die benötigten Antworten häufig bereits in CAD-Dateien, Handbüchern, Arbeitsanweisungen und Schulungsvideos vorhanden. Die Plattform von Convai verarbeitet Dokumente, Videos und andere Dateien zu multimodalem Wissen, das Agenten in Gesprächen nutzen können. Derselbe Agent und dasselbe Wissen können eine Person beim Erlernen eines Ablaufs in einer 3D-Simulation unterstützen und sie später bei der Ausführung an echter Ausrüstung begleiten.
Convai richtet die Plattform an Einsatzbereiche wie Luft- und Raumfahrt, Verteidigung und Fertigung, in denen Unternehmenswissen möglicherweise innerhalb des eigenen Netzwerks bleiben muss. Kunden können Agenten auf ihren eigenen Servern oder in ihrer eigenen Cloud erstellen und sie in Anwendungen, 3D-Simulationen und von Beschäftigten genutzten Geräten bereitstellen.
Anwendungen für Web, 3D und die physische Arbeit
Die Plattform umfasst ein Web-SDK, mit dem sich Agenten in Webanwendungen und Portale integrieren lassen. Diese Agenten können Nutzer befragen, lange Formulare ausfüllen, Bereiche einer Benutzeroberfläche hervorheben und Menschen durch Aufgaben führen. Convai bietet außerdem SDKs für Unity, Unreal Engine, NVIDIA Omniverse und three.js an, mit denen sich dialogfähige Agenten zu bestehenden 3D-Simulationen hinzufügen lassen.
Avatar Studio unterstützt dialogfähige Avatare für Kioske auf Messen und in Produktionshallen sowie Übungseinheiten für Verkaufsgespräche, HR-Situationen und Führungskräftetraining. Assembly Studio nutzt CAD-Dateien, damit Menschen per Sprache Fragen zu Teilen und Baugruppen stellen können, und erstellt zugleich Schritt-für-Schritt-Anleitungen zur Prüfung durch Experten.
Convai Sim kombiniert Aufnahmen mittels Gaussian Splatting und digitale Zwillinge mit CAD-Wissen, erkundbaren 3D-Umgebungen und dialogfähigen Avataren. Vision Assistant läuft auf einem Smartphone oder Tablet oder in einer mit Convai-Plugins erstellten XR-Anwendung. Dadurch kann ein KI-System sehen, was ein Techniker sieht, und jeden einzelnen Schritt anhand von Handbüchern und Dokumenten anleiten.
On-Premise-Infrastruktur und Zugriffskontrollen
Convai beschreibt die Plattform als Stack, der mit dem KI-Rechenzentrum eines Kunden beginnt und Agenteninfrastruktur, KI-Modelle, SDKs und Produkte umfasst. Die Grundlage bietet die Erstellung von Agenten, Live-Sprach- und Textgespräche, die Skalierung über die GPU-Server des Kunden, Überwachung und Authentifizierung.
Der Zugriff wird über Verzeichnisgruppen, MCP-Server und vom Kunden genehmigte Zugangsdaten kontrolliert. Convai zufolge bleibt ein API-Schlüssel auf dem Server des Kunden, während Browser vom Kunden ausgestellte Tokens verwenden. Agenten können sich über MCP-Server mit OAuth-Autorisierung mit internen Tools und Daten verbinden.
Die Plattform umfasst außerdem die Verwaltung von Agenten, eine Knowledge Bank, Langzeitgedächtnis, Mindview und Team-Arbeitsbereiche. Mindview zeigt den vollständigen Prompt hinter einer Antwort, sodass Teams unerwartete Antworten nachvollziehen und korrigieren können. Ein Komplettpaket ergänzt eine Infrastruktur für Pixel-Streaming, darunter Matchmaking-Server, Signalisierungs- und Proxy-Dienste, Asset-Verwaltung und Stream-Skalierung. Dadurch können 3D-Erlebnisse wie Avatare und Convai Sim von den Servern des Kunden in die Browser der Nutzer gestreamt werden.
Für Nutzer beschreibt die Ankündigung eine einzige Bereitstellung, die von Schulungsumgebungen auf Webanwendungen, Simulationen und Unterstützung bei der physischen Arbeit ausgeweitet werden kann. Für Unternehmen steht bei Convais Modell die Kontrolle über Daten, Zugangsdaten, Rendering und Bereitstellung im Mittelpunkt, während derselbe Agent in mehreren Arbeitsumgebungen eingesetzt wird.
