AI Studios

Was ist AI Studios?

AI Studios ist eine Cloud-basierte Plattform zur Erstellung von Videos mit künstlichen Intelligenz-Avataren, die von DeepBrain AI entwickelt wurde. Oft wird sie auch als AI Studio bezeichnet. Die Nutzer können Skripte, Themen oder Webadressen eingeben, außerdem können PPT-, PDF- und andere Dokumente hochgeladen werden. Dadurch kann das System automatisch Skripte, Erklärungen durch künstliche Intelligenz-Avatare, Synchronisationen, Untertitel sowie visuelle Elemente erstellen.

Die Plattform umfasst gleichzeitig die traditionelle Videobearbeitung für digitale Avatare, generative Bild- und Videomodelle wie Veo und Sora, AI-Dubbing sowie Interactive Avatare für Echtzeitgespräche. Sie eignet sich für Schulungen, Kurse, Marketing, Unternehmenskommunikation, mehrsprachige Lokalisierung und Kundenservice-Szenarien.

Videos von künstlichen Intelligenz-Digitalmenschen

Die Nutzer können aus über 2000 AI-Avataren Personen, Kleidung und Stimmen auswählen, einen Script im Szeneneditor eingeben und so Videos mit Sprachausgabe erstellen. Digitale Personen können für Einzelpersönlichkeiten, Dialoge zwischen mehreren Personen, Produktpräsentationen und Präsentationen verwendet werden.

KI-Charaktere können weiterhin Probleme mit Lippenbewegungen, Tonfall, Blicken und Gesten aufweisen. In den Bereichen Medizin, Finanzen, Recht und Nachrichten darf man synthetische Charaktere nicht dazu einsetzen, sich als echte Experten oder Zeugen auszugeben.

Skript und Thema in Video umwandeln

Topic to Video nutzt große Sprachmodelle, um Themen, Webseiten oder Texte zu verstehen, Szenen automatisch aufzuteilen und Kommentare sowie Bilder zu erzeugen. Es eignet sich dazu, erste Ideen schnell in bearbeitbare Videos umzuwandeln, ersetzt aber nicht direkt die Überprüfung von Fakten und die kreative Prüfung.

Die Eingabe sollte das Zielpublikum, die Dauer, den Tonfall, die Struktur sowie die Aufrufe zur Handlung angeben. Nach der Erstellung müssen Daten, Zitate, Produktbeschreibungen und Aufnahmen überprüft werden, um sicherzustellen, dass sie mit dem Drehbuch übereinstimmen.

URL in Video umwandeln

Nachdem der Benutzer einen Link zu einem Blog, einem Artikel oder einer Produktseite eingefügt hat, extrahiert das System den Inhalt und erstellt eine Videostruktur. Dynamische Webseiten, Anmeldedaten, komplexe Tabellen sowie abgelaufene Werbeaktionen können möglicherweise nicht richtig ausgelesen werden; daher sollte die Quellseite vor und nach der Erstellung überprüft werden.

PPT in Video umwandeln

Die Importfunktion von PowerPoint liest die Folien sowie die Anmerkungen des Redners, wandelt diese in Video-Szenen um und fügt anschließend Avatare, Töne und Untertitel hinzu. Sie eignet sich für Kurse, Verkaufspräsentationen und Unternehmensschulungen.

Komplexe Animationen, Makros, besondere Schriftarten sowie eingebettete Medien werden nicht immer vollständig beibehalten. Nach dem Import sollte die Layout-Struktur, die Klarheit der Diagramme, die Dauer der Seitenansicht sowie die Reihenfolge der Kommentare überprüft werden.

PDF und Dokumente in Video umwandeln

Docs to Video kann PDFs, PPTs sowie textreiche Dokumente in Skripte, Bilder sowie Erklärungen durch digitale Avatare umwandeln. Bei langen Dokumenten sollten zunächst die wichtigsten Abschnitte ausgewählt werden, damit im automatischen Zusammenfassung nicht wichtige Bedingungen übersehen werden oder Anhänge als zentrale Schlussfolgerungen angesehen werden.

Custom Avatar

Benutzer können aufgenommene Videos hochladen, um digitale Avatare zu erstellen. Offiziell wird empfohlen, mindestens 3 Minuten lange Videos zu verwenden, die sowohl von vorne als auch von der Seite aufgenommen wurden. Zu kurze Videos können dazu führen, dass die Bewegungen nicht flüssig genug sind.

Free beinhaltet 1 anpassbaren Avatar-Winkel, Personal 3, Team 5 und Enterprise unbegrenzt.

Echte Avatare erfordern eine ausdrückliche Genehmigung, wobei Zweck, Gebiet, Dauer sowie die Möglichkeiten zur Rücknahme und Löschung festgelegt werden müssen. Nach dem Ausscheiden eines Mitarbeiters oder beim Ablauf des Vertrags muss die unbefugte Nutzung beendet werden.

Photo Avatar und Product Avatar

Das Photo Avatar verwandelt statische Fotos in sprechende Personen, während das Product Avatar für Marketingzwecke und die Präsentation von Produkten verwendet wird. Sie eignen sich für schnelle Inhalte, doch KI kann Gesichter, Verpackungen, Logos sowie die Proportionen der Produkte verändern; daher muss vor der offiziellen Veröffentlichung eine manuelle Überprüfung erfolgen.

Mehrsprachige Sprach- und Aussprachekontrolle

Die Plattform bietet mehr als 110 Sprachrichtungen sowie eine große Anzahl an Stimmen. Es ist möglich, die Sprechgeschwindigkeit, den Tonfall und die Aussprache einzustellen. Das Custom Dictionary dient dazu, Markennamen, Personennamen, Abkürzungen und Fachbegriffe zu korrigieren.

Mehrsprachige Videos sollten weiterhin von Muttersprachlern hinsichtlich Semantik und kultureller Anpassung überprüft werden.

KI-Übersetzung von Video-Dubbing

AI Dubbing kann bereits vorhandene Videos übersetzen und die Sprache mit den Lippenbewegungen synchronisieren. Personal beinhaltet 120 Minuten pro Monat, Team 240 Minuten pro Stelle pro Monat, während Enterprise erweiterte Mengen an Zeit anbietet.

Team und höher können Übersetzungsskripte korrigieren und optimieren.

Die Übersetzung beinhaltet das Hochladen des ursprünglichen Videos, der Tonspur und der Untertitel. Bei sensiblen Kundendaten müssen zunächst die Richtlinien für die Verarbeitung, Speicherung und Löschung überprüft werden.

Generative Bild- und Videomodelle

AI Studios integriert Modelle wie Seedance, Veo, Sora, Kling und Nano Banana in eine einheitliche Plattform. Nutzer können Hintergründe, Illustrationen und Kurzvideo-Szenen für Videos erstellen und im Editor grundlegende Modelle nutzen, die keine Generative Credits verbrauchen.

Hochentwickelte, unabhängige Generatoren verbrauchen Generative Credits; die genauen Kosten hängen vom Modell, der Dauer und der Auflösung ab. Die Eingabe für Basismodelle unterscheidet sich von der für Hochentwicklungsmodelle – vor der Erstellung sollte man stets die verfügbaren Credits überprüfen.

Vergleich der Video-Pakete von AI Studios

Laut der offiziellen Website kann eine jährliche Zahlung etwa 20 % sparen. Die Dauer einer kostenlosen Verwendung variiert in den verschiedenen Sprachversionen zwischen 1 und 3 Minuten – dies könnte auf regionale Unterschiede oder aktualisierte Seiten zurückzuführen sein. Tatsächlich gilt das Limit, das nach dem Anmelden im Konto festgelegt ist.

Vergleich der Interactive Avatar-Pakete

Interactive Avatar ist ein Produkt für Echtzeit-Kommunikation. Seine Credits sowie die Pakete zur Videoerstellung unterscheiden sich davon, und sie können nicht direkt mit den generativen Credits für Personal oder Team berechnet werden.

Interaktive Videos und Tests

Team bietet interaktive Videos an, während Enterprise zusätzlich interaktive Quizze sowie die Exportfunktion in SCORM-Format unterstützt. Es eignet sich für Kurse und Mitarbeiterausbildungen, wobei man im Ziel-LMS die Fertigstellung, die Aufzeichnung der Antworten, Untertitel sowie die Kompatibilität mit mobilen Geräten überprüfen sollte.

Teamzusammenarbeit

Ein Team umfasst gemeinsame Arbeitsbereiche sowie weitere Funktionen zur Zusammenarbeit. Die Erstellung von Inhalten wird nach der Zuweisung von Lizenzen innerhalb des Teams geteilt. Der Administrator sollte Rechte für die Mitglieder, Markenressourcen, Avatare sowie Budgets festlegen, um versehentliche Erstellungen oder Missbrauch zu verhindern.

Video-Editor

Der Editor unterstützt Vorlagen, Szenen, Untertitel, Bilder, Videos, Musik sowie die Anordnung von Digital-Persönlichkeiten. SRT-Upload und -Download helfen bei der Verarbeitung professioneller Untertitel.

Vor der Ausgabe sollten Übergänge, Lautstärke, die Untertitelfläche sowie das Seitenverhältnis für Mobilgeräte vorausgesehen werden.

Priorisierung nach der Anzahl der Videos

Für Personal und Team gibt es keine Beschränkung bezüglich der Anzahl der von AI verarbeiteten Videos. Monatlich werden jedoch jeweils 50 bzw. 150 Videos priorisiert bearbeitet. Bei Überschreitung dieser Zahl gelangen die Videos in die reguläre Warteschlange. „Keine Beschränkung der Anzahl“ bedeutet nicht, dass unendlich viele Videos gleichzeitig verarbeitet werden können, dass unendlich viele GPU-Ressourcen zur Verfügung stehen oder dass keine Einschränkungen durch Richtlinien zur fairen Nutzung gelten.

Generative Credits Zusatzpaket

Personal und Team können zusätzliche Generierungslizenzen erwerben. Credits dienen für fortgeschrittene Bild- und Videomodelle und sind nicht gleichzusetzen mit herkömmlichen Avatar-Videos oder Minuten der AI-Dubbing-Funktion.

Vor dem Kauf sollten die Einzelpreise des Zielmodells sowie die Gültigkeitsdauer des Limits überprüft werden.

AI Studios API

DeepBrain AI bietet die AI Studios V3-API an, mit der Videos über Vorlagen oder Projekte erstellt, Projekte geändert sowie Ergebnisse abgerufen werden können. Enterprise-Kunden haben zudem die Möglichkeit, in größerem Umfang Inhalte zu generieren und zu integrieren.

API-Schlüssel sollten auf der Serverseite gespeichert werden. Die Anwendung muss für die asynchrone Erstellung, das Abfragen, Webhooks, den Versuch wiederholter Versuche bei Fehlern sowie den Download der Ergebnisse sorgen. Die automatische Erstellung muss dennoch dem Inhaltskontrollprozess unterzogen werden.

AI Human SDK

Die offiziellen Entwicklungsdokumentationen umfassen außerdem das AI Human SDK für Web, Android, iOS, Unity und Windows, das dazu dient, Echtzeit-Digital-Personen-Player sowie Dialogfunktionen in Anwendungen, Ausstellungsräumen, Kundenservice-Systemen und virtuellen Räumen zu integrieren. Die Lizenzen für das SDK sowie die Preise für die Dienstleistungen müssen im Rahmen eines Unternehmenskontos festgelegt werden.

GitHub und der Open-Source-Zustand

DeepBrain AI stellt offizielle Entwicklungsdokumente auf GitHub sowie Beispiele für die Studio V3-API zur Verfügung, um Entwicklern das Verständnis der Schnittstellen zu erleichtern; das Kern-Avatar-Generierungsmodell, der Web-Editor sowie Sprach- und Cloud-Dienste sind keine Open-Source-Produkte.

Der offizielle Dokumentenspeicher verwendet seine eigene Lizenzkennzeichnung und kann nicht mit der Open-Source-Lizenz der Kernplattform oder einer Lizenz für eine private Bereitstellung gleichgesetzt werden.

Kommerzielle Nutzung und Privatsphäre

Beim Einsatz von Digital Avataren, Stimmen, Bildern und generierten Videos müssen die Nutzer über die entsprechenden Rechte verfügen. Die Anpassung von Avataren sowie interaktive Sessions können biometrische Daten, Kundenkommunikationen sowie Unternehmenswissen beinhalten; es sollten daher die Nutzungszwecke, die Aufbewahrungsfristen, die Löschung sowie die Protokollierung und Verarbeitung durch Drittanbieter festgelegt werden.

Leitfäden für AI Studios

Eine grundlegende Aufgabe erledigen

1. Bestimmen Sie das Publikum, die Plattform, das Format, die Dauer sowie die Informationen, die übermittelt werden müssen;
2. In den AI Studios werden Skripte, Aufnahmen oder Referenzmaterialien vorbereitet, die zur Nutzung bereitstehen;
3. Wählen Sie ein Video mit einem künstlichen Intelligenz-Digitalhuman aus und erstellen Sie eine Voransicht zu niedrigen Kosten;
4. Verwenden Sie Skripte und Themes, um Videos anzupassen – in Bezug auf Bild, Rhythmus, Untertitel und Ton.
5. Jedes Frame wird auf Personen, Texte, Logos, Mundbewegungen und die Richtigkeit der Fakten überprüft;
6. Nach der Bestätigung der Lizenzen für Musik, Porträts und Materialien wird die Datei in der gewünschten Formatierung exportiert;

Erstellung wiederverwendbarer professioneller Workflows

1. Erstellung von Skripten, Drehbüchern, Markenmaterialien und einer Liste der zu verbietenden Elemente;
2. Einheitliche Parameter für Videos von KI-Digitalpersonen, Skripte und Thema-zu-Video-Übertragungen sowie URL-zu-Video-Übertragungen speichern;
3. Zuerst werden das Modell und die Obergrenze mit repräsentativen Aufnahmen getestet;
4. Fehlerhafte Aufnahmen in eine manuelle Bearbeitung überführen oder neu erstellen;
5. Einheitliche Untertitel, Lautstärke, Farben und Abspann-Copyright-Informationen;
6. Erst nach Erfassung der Version und des Prüfers in Batch veröffentlichen;

Für welche Nutzer geeignet?

• Unternehmen und Bildungseinrichtungen, die Schulungs- und Kursvideos erstellen;
• Ein Team, das Inhalte in PPT-, PDF- und Webseitenformat in Video umwandeln muss;
• Marken, die mehrsprachige Marketing- und Produktbeschreibungen erstellen;
• Kreative, die eine individuelle digitale Avatardarstellung erstellen möchten;
• Projekte für Kundenservice und Ausstellungsräume, die Echtzeit-Interaktion mit Avataren erfordern;
• Entwickler, die über API und SDK in Massen auf digitale Avatare zugreifen.

Hauptvorteile

• Erstellung über mehrere Eingänge: Skripte, Themen, URLs, PPT und PDF;
• Zentrale Bearbeitung von Digital-Persönlichkeiten, Sprache, Untertiteln und Bildern;
• Unterstützung für AI-Dubbing mit Lippenbewegungs-Synchronisation;
• Aggregierte Generierungsmodelle wie Veo, Sora, Kling usw.;
• Zwei vollständige Lösungen: Video sowie interaktive Avatare in Echtzeit;
• Offene API, plattformübergreifendes AI Human SDK und offizielle Beispiele.

Einschränkungen und Hinweise

• Für Videoerstellung, AIDubbing und die Verwendung fortgeschrittener Modelle gelten unterschiedliche Gebühren, die bei der Kostenschätzung nicht miteinander vermischt werden dürfen.
• Free hat Einschränkungen hinsichtlich der Anzahl der Videos, der Dauer, der Auflösung und des Modells;
• Team wird nach Plätzen berechnet;
• Fehler können bei der digitalen Datenerfassung, Übersetzung, Dokumentenzusammenfassung und Bildgenerierung auftreten;
• Echte Avatare erfordern eine Genehmigung, und für Live-Sessions müssen Aspekte wie Privatsphäre, Inhaltssicherheit sowie die Konnektivitätskapazität berücksichtigt werden.

Häufige Fragen

Ist AI Studios kostenlos?

Es gibt ein Free-Paket, mit dem bis zu 3 Kurzvideos erstellt und in 720p-Qualität exportiert werden können. Zudem stehen einmalige Generative Credits sowie eine begrenzte Anzahl an Dubbing-Möglichkeiten zur Verfügung.

Wie viel kostet AI Studios Personal?

Die aktuelle Preisgestaltung für die offizielle Website beträgt 24 US-Dollar pro Monat. Es sind unbegrenzte Anzahl an Avatar-Videos möglich, in 1080p-Qualität. Zudem stehen 3 benutzerdefinierte Avatare sowie 120 Minuten Synchronisation pro Monat zur Verfügung.

Kann man PPT in ein Video mit digitalem Mensch umwandeln?

Ja, PPT-Seiten und Notizen können in den Editor importiert und bearbeitet werden, anschließend können Avatare, Töne und Untertitel hinzugefügt werden.

Wie viel kostet ein interaktiver Digital-Mensch?

Das einzelne Standard-Interaktiv-Avatar-Paket kostet 99 US-Dollar pro Monat und beinhaltet 100 Credits; pro 5-minütiger Sitzung wird 1 Credit verbraucht.

Wird eine API bereitgestellt?

Es werden die AI Studios V3 API sowie AI Human SDKs für Web, Mobile, Unity und Windows bereitgestellt.

Ist AI Studios Open Source?

Die Kernplattform ist nicht open source; auf GitHub werden nur die Entwicklungsdokumentationen und API-Beispiele veröffentlicht.