Vercel bringt Gemini Omni 1.2 Flash zur Videogenerierung in den AI Gateway

Vercel hat Googles Gemini Omni 1.2 Flash in den AI Gateway integriert. Entwickler können damit über einen API-Schlüssel Videos generieren und bearbeiten, ohne ein separates Google-Konto zu benötigen. Das Modell unterstützt native Audios, Referenzbilder, Videoerweiterungen und Auflösungen bis zu 4K.
- Gemini Omni 1.2 Flash ist jetzt im Vercel AI Gateway verfügbar.
- Das Modell generiert 3 bis 15 Sekunden lange Videos mit nativen Audios.
- Videos können mit bis zu sechs Referenzbildern bearbeitet und insgesamt auf bis zu 30 Sekunden verlängert werden.
- Die Ausgabe unterstützt 360p, 720p, 1080p und 4K im Format 16:9 oder 9:16.
- Laut Vercel erhebt der AI Gateway weder einen Aufschlag noch eine Plattformgebühr für Inferenz.
Videogenerierung und -bearbeitung
Gemini Omni 1.2 Flash kann aus Textvorgaben Videos von 3 bis 15 Sekunden Länge mit nativen Audios generieren. Außerdem lassen sich Ausgangsclips mit einer Länge von 3 bis 15 Sekunden mithilfe von bis zu sechs Referenzbildern bearbeiten.
Entwickler können Videos pro Aufruf um 3 bis 10 Sekunden verlängern, insgesamt auf bis zu 30 Sekunden. Generierte Clips lassen sich in Folgeaufrufen außerdem weiter verfeinern, indem eine vorherige InteractionId verwendet wird.
Die Ausgabe ist in den Auflösungen 360p, 720p, 1080p und 4K verfügbar. Das Modell unterstützt sowohl das Format 16:9 als auch 9:16 und bietet damit Optionen für verschiedene Videoformate.
Zugriff über das AI SDK
In seiner Ankündigung zeigt Vercel, wie Entwickler das Modell im AI SDK unter dem Modellnamen google/gemini-omni-1.2-flash aufrufen. Die Funktion generateText kann das generierte Video als Datei zurückgeben, die Entwickler als MP4 speichern können.
Das Beispiel fordert ein dreisekündiges Video in 360p an, das auf der Vorgabe „A red ball rolls across a white table.“ basiert. Es verlangt Text- und Videoantworten und sucht anschließend die zurückgegebene Datei anhand ihres Medientyps video/mp4.
Für Streaming-Workflows können Entwickler streamText verwenden und beim Eintreffen der Ergebnisse fullStream auslesen. Vercel zufolge wird das Video als fertige Datei bereitgestellt. Im Beispiel wird es in video.mp4 geschrieben, sobald der entsprechende Dateiteil eintrifft.
Was der AI Gateway bietet
Der AI Gateway bietet laut Vercel eine einheitliche API zum Aufrufen von Modellen, zur Erfassung von Nutzung und Kosten sowie zur Konfiguration von Wiederholungsversuchen, Ausfallsicherung und Leistungsoptimierungen für eine höhere Verfügbarkeit als beim Anbieter.
Der Dienst umfasst außerdem benutzerdefinierte Berichte, Unterstützung für Zero Data Retention, Budgets für API-Schlüssel und Routingregeln. Laut Vercel bildet der AI Gateway die Preise der Anbieter ohne Aufschlag ab und erhebt keine Plattformgebühr für Inferenz, auch nicht bei Anfragen über Bring Your Own Key, kurz BYOK.
Für Entwickler ergänzt die Integration das Google-Videomodell um weitere Modelle im Katalog des AI Gateway. Zugriff, Nutzungsverfolgung und Konfiguration bleiben dabei innerhalb desselben Gateways. Vercel verweist auf den Katalog, um weitere Modelle zu erkunden.
Vercel: Gemini Omni 1.2 Flash now available on AI Gateway


