ChatAvatar

Was ist ChatAvatar?

ChatAvatar ist ein AI-basierter 3D-Gesichtsgenerator in der Hyper3D-Plattform, der von dem Team von Deemos entwickelt wurde. Er kann anhand von textuellen Beschreibungen oder Bildern von Personen realistische, animierbare 3D-Gesichter erstellen und bietet außerdem Meshs sowie PBR-Texturen für CG-Arbeitsabläufe.

ChatAvatar dient hauptsächlich der Erstellung hochwertiger Kopf- und Gesichtsmodelle. Es handelt sich dabei nicht um eine Methode zur Erstellung allgemeiner 3D-Objekte wie bei Rodin. Auf der aktuellen Website werden ChatAvatar, Rodin und OmniCraft nun alle unter dem Produktportfolio von Hyper3D zusammengefasst. Der alte Eingang zu HyperHuman sollte nicht mehr als Hauptadresse für die Produkte verwendet werden.

Was ist der Unterschied zwischen ChatAvatar und Rodin?

Wenn das Ziel darin besteht, Gesichter von Personen, digitale Avatare oder realistische Porträts zu erstellen, sollte man vorrangig ChatAvatar verwenden. Für Produkte, Möbel, Requisiten, Gebäude sowie allgemeine Charaktermodelle eignet sich Rodin besser.

Kernfunktionen

1. Erstellung von 3D-Gesichtern aus Bildern

Nachdem der Benutzer ein klares, vorzeigbares Porträt hochgeladen hat, analysiert ChatAvatar die Gesichtsform, die Gesichtszüge sowie weitere äußere Merkmale, um anschließend 3D-Gesichtsdaten zu erstellen. Die offizielle Website empfiehlt Fotos mit hellem Licht, wenigen Schatten und einem klaren Bild des Gesichts.

2. Textgenerierung von Gesichtern für Charaktere

Die Benutzer können auch mithilfe von Texten das Geschlecht, das Alter, die Gesichtsform, die Hautfarbe, die Frisur sowie den Stil der Figur beschreiben. Der Text hilft dabei, originelle Charakterkonzepte zu entwickeln, doch je vager die Beschreibungen sind, desto schwieriger ist es, Identität und Details präzise zu steuern.

3. PBR-Textur

ChatAvatar bietet für die CG-Produktion PBR-Texturen, die es der Haut und anderen Oberflächen ermöglichen, unter verschiedenen Beleuchtungssituationen realistischere Materialreaktionen zu zeigen. Die Texturqualität muss jedoch in dem jeweiligen Engine, der Beleuchtung sowie dem Renderer direkt überprüft werden.

4. Animierbare Gesichtsressourcen

Das Produkt zeichnet sich durch die schrittweise Erstellung animierbarer 3D-Gesichter aus und eignet sich gut für die weitere Integration von Gesichtsausdrücken, Mundbewegungen oder Charakteranimationen. Die Erstellung animierbarer Modelle bedeutet jedoch nicht, dass alle Projekte direkt verwendet werden können; Bindings, Blendshapes sowie Gesichtskontrollen müssen weiterhin im Einklang mit dem jeweiligen Workflow überprüft werden.

5. Kauf nach 3D-Voranschau

Das Business-Paket beinhaltet eine 3D-Voransicht von ChatAvatar als Vorteil – Nutzer können das Ergebnis zunächst ansehen, bevor sie entscheiden, ob sie es verwenden oder exportieren möchten. Die Voransicht kann jedoch keine professionelle Überprüfung der Topologie, UVs, Texturen sowie der Animationen nach dem Herunterladen ersetzen.

Übersicht der Hauptfunktionen

• Erstellung realistischer 3D-Gesichtsdaten auf der Grundlage eines einzelnen, klaren Porträts.
• Erstellen Sie originelle Charakterporträts durch textliche Beschreibungen.
• Erstellung von PBR-Hauttexturen, die für den physikalischen Render-Workflow geeignet sind.
• Es werden Gesichtsmodelle bereitgestellt, die weiterhin mit Emotionen versehen und zu Animationsbildern umgewandelt werden können.
• Prüfen Sie das 3D-Ergebnis vor der Bestätigung des Kaufs oder der Exportierung.
• Importieren Sie die Assets weiterhin in Erstellungsumgebungen wie Unity, Unreal Engine, Maya usw.
• Importieren Sie die ChatAvatar-Ressourcen mithilfe der offiziellen Tools in das NVIDIA Omniverse Kit.
• Weiterbearbeiten von Texturen, Bildern und allgemeinen 3D-Ressourcen in Kombination mit anderen Tools von Hyper3D.

Für welche Benutzer geeignet

• Entwickler, die schnell realistische Gesichtsprototypen für Spielcharaktere erstellen.
• Teams, die digitale Menschen, virtuelle Moderatoren oder interaktive Charaktere benötigen.
• Künstler, die Charakterskizzen für Film- und Fernseh-Vorproduktionen, virtuelle Produktionen sowie VFX erstellen.
• Technische Teams zur Entwicklung von AR, VR, sozialen Räumen und Echtzeit-Erlebnissen.
• Designer, die schnell einen 3D-Gesichtsrahmen aus einem Charakterkonzept erhalten möchten.
• Unternehmenskunden, die Serienproduktion von Charakter-Ressourcen, APIs oder eine private Bereitstellung benötigen.
• Schöpfer von Workflows für digitale Menschen in NVIDIA Omniverse.

Welche Aufgaben eignen sich nicht für ChatAvatar

• Erstellung von nicht-gesichtsbasierten Assets wie Möbeln, Produkten, Gebäuden und allgemeinen Gegenständen.
• Es sind nur 2D-Profilbilder, Ausweisdarstellungen oder bearbeitete Social-Media-Fotos erforderlich.
• Projekte, bei denen eine einzige Erstellung ausreicht, um die endgültige Qualität eines Filmausschnitts zu erreichen.
• Projekte, bei denen ohne Genehmigung für Porträts die äußere Erscheinung realer Personen nachgeahmt werden soll.
• Komplette Charaktererstellung mit vollständiger Kleidung, komplexen Körperbinderungen und einer Bewegungsdatenbank in einem.
• Szenarien, in denen eine präzise Identifizierung, medizinische Messungen oder eine auf forensischem Niveau liegende Genauigkeit erforderlich ist.

Wie man aus Fotos ein 3D-Gesicht erstellt

1. Bestätigung der Genehmigung zur Hochladen, Erstellung und Nutzung von Fotos sowie Personendarstellungen.
2. Wählen Sie Porträts, die klar, positiv, unverdeckt sind, bei denen das Licht gleichmäßig verteilt ist und es nur wenige Schatten gibt.
3. Melden Sie sich bei Hyper3D an und wechseln Sie in den ChatAvatar-Arbeitsbereich.
4. Laden Sie ein Bild hoch und wählen Sie über die Benutzeroberfläche die gewünschten Erstellungs- oder Vorschaueinstellungen aus.
5. Warten Sie, bis das System die Erstellung der Gesichtsmerkmale und Texturen abgeschlossen hat.
6. Überprüfen Sie im 3D-Voranschau die Gesichtszüge, die Seitenkonturen, die Ohren, die Haarlinie und die Haut.
7. Nach Bestätigung des Pakets, der Punkte und der Geschäftslizenz werden die entsprechenden Ressourcen exportiert.
8. Überprüfen Sie in dem Ziel-DCC oder im Engine die Topologie, UVs, Materialien, Bindings und Gesichtsdeformationen.

Wie man mit Worten originelle Charaktere entwirft

1. Zuerst sollte das Altersspektrum der Charaktere, ihre Gesichtsstruktur, ihr Temperament sowie der künstlerische Stil festgelegt werden.
2. Vermeiden Sie die Verwendung echter Namen von Personen, geschützter Charaktere oder irreführender Identitätsbeschreibungen.
3. Ergänzung der Hautfarbe, Augen, Haare, Make-up und des Gesamtbildes.
4. Erstellen Sie mehrere Kandidatenversionen und investieren Sie nicht alle Feinarbeitstunden in das erste Ergebnis.
5. Prüfen Sie von vorne und von der Seite die Konturen, Proportionen sowie die Erkennbarkeit der Figur.
6. Nach der Auswahl der Richtung wird in der speziellen Software weitergearbeitet, um Haare, Zähne, Augen und Materialien zu erstellen.
7. Erstellen Sie eine Charakterbeschreibungstabelle und speichern Sie die Hinweise sowie die Versionshistorie.

Export- und Erstellungssoftware-Werkfluss

Hyper3D bietet Exportmöglichkeiten für Assets für gängige CG-Umgebungen wie Unity, Unreal Engine und Maya. Die genauen Download-Pakete von ChatAvatar, die Topologie, die Texturauflösung sowie die optionalen Komponenten richten sich nach dem nach der Erstellung angezeigten Export-Panel.

• Spiele-Engine: Überprüfen Sie Knochen, Gesichts-Blendshapes, Material-Node sowie das Leistungsbudget.
• Maya oder Blender: Weitere Anpassungen an Topologie, UVs, Haaren, Augen, Zähnen und Bindings.
• Unreal Engine: Testen von Hautmaterialien, Beleuchtung, LOD und Echtzeit-Gesichtsausdrücken.
• Unity: Überprüfung der Render-Pipeline, der Texturenkanäle, der Avatar-Einstellungen sowie der Leistung auf mobilen Geräten.
• NVIDIA Omniverse: Verwenden Sie die offiziellen Importwerkzeuge, um Texturen, Topologien und die benötigten Komponenten auszuwählen.
• Film und VFX: Neubewertung der Hautdetails und der Qualität der Verformungen in Hochauflösungsaufnahmen.

Preis- und Paketvergleich

ChatAvatar ist nun in das einheitliche Abonnementsystem von Hyper3D integriert. Auf der Preisseite werden für den Business-Tarif ausdrücklich die 3D-Voransicht sowie die kommerziellen Lizenzen für ChatAvatar aufgeführt. Der Free- und Creator-Tarif richten sich hauptsächlich an Rodin sowie andere kreative Werkzeuge.

Laut der offiziellen Website können kostenlose Nutzer Punkte zum Preis von 1,5 US-Dollar pro Punkt direkt kaufen. Die Anzahl der Punkte im Rahmen eines Abonnements wird dabei periodisch aktualisiert. Der tatsächliche Punktaufwand für ein einzelnes ChatAvatar-Artikel ist auf der Seite mit den offiziellen Preisen nicht fest angegeben; es gilt die Bestätigungsseite nach der Erstellung als Maßstab.

Was muss man vor dem Kauf überprüfen?

• Das Business-Paket umfasst die Anzahl der Abonnementspunkte sowie den Verbrauch pro ChatAvatar.
• 3D-Voranschau, Herunterladen, Neu erstellen – werden für verschiedene Texturen oder Topologien jeweils Gebühren erhoben?
• Umfasst die Geschäftslizenz die Kundenlieferung, die Veröffentlichung von Spielen sowie die erneute Verteilung von Materialien?
• Regeln für die automatische Erneuerung im Monats- oder Jahresabonnement, den Auffüllung des Kontingents sowie für ungenutzte Punkte.
• Werden reale Personen, Markenfiguren und Branchen mit hohem Risiko durch zusätzliche Genehmigungsbeschränkungen betroffen?
• Ob die Anzahl der Teammitglieder, die API-Konkurrenz sowie die Anzahl der privaten Ressourcen den Anforderungen in der Produktion entsprechen.

Gewerbelizenzen und Persönlichkeitsrechte

Das Business-Paket beinhaltet ausdrücklich die kommerziellen Lizenzen für ChatAvatar. Doch eine solche Lizenz bedeutet nicht, dass man das Recht hat, Porträts, urheberrechtlich geschützte Charaktere, Marken oder personenbezogene Daten zu nutzen. Die rechtliche Verantwortung für die eingegebenen Inhalte sowie deren endgültige Verwendung liegt weiterhin beim Nutzer.

• Erlangen Sie eine klare, nachweisbare Genehmigung für das Porträt sowie die kommerzielle Nutzung, bevor Sie das Aussehen einer realen Person kopieren.
• Für Fotos von Minderjährigen ist die Zustimmung des Erziehungsberechtigten erforderlich, um jegliche risikoreiche oder unangemessene Nutzung zu vermeiden.
• Verwenden Sie keine generierten Avatare, um sich als echte Person auszugeben, betrügerische Identitäten zu erstellen oder irreführende Beweise zu schaffen.
• Bekannte Charaktere, Schauspieler und Markenbilder können weiterhin durch Urheberrechte, Markenrechte und Persönlichkeitsrechte geschützt sein.
• Im Vertrag müssen für Kundenprojekte die durch KI erzeugten Inhalte, die Herkunft der Ressourcen sowie die Lizenzen und Nutzungsbereiche festgelegt werden.
• Wenn es durch geltende Gesetze oder Plattformrichtlinien erforderlich ist, muss offengelegt werden, dass der Inhalt von KI erzeugt wurde.

API und Zugang für Entwickler

Hyper3D bietet eine asynchrone Web-API mit Authentifizierung mittels Bearer-Token. Die offiziellen Dokumentationen befassen sich derzeit hauptsächlich mit der Erstellung von Rodin v2, dem Status der Aufgaben sowie dem Herunterladen der Ergebnisse. Die Business-Version bietet vollständige Standard-API-Rechte; bei der Enterprise-Version können zusätzliche Anpassungen bezüglich der Implementierung, der Konkurrenzfähigkeit sowie der Individualisierung vereinbart werden.

Offizielle GitHub-Projekte und Open-Source-Bereich

DeemosTech bietet auf GitHub Funktionen für Rodin, Plugins für Unreal und Godot sowie ein Importwerkzeug für ChatAvatar in NVIDIA Omniverse an. Diese Repositorien dienen der Integration, zur Erstellung von Hinweisen sowie zum Import von Assets und enthalten nicht die Quellcodes der Kerngenerierungsmodelle von ChatAvatar oder Rodin.

• ChatAvatarImportTool-Omni wird verwendet, um heruntergeladene Ressourcen in das Omniverse Kit zu importieren.
• Rodin3D Skills bietet Anleitungen und Beispiele für API-Aufrufe.
• Das Rodin Bridge-Plugin hilft dem Unreal Engine-Workflow dabei, generierte Assets zu nutzen.
• Der Godot-Plugin bietet eine entsprechende Rodin-Integration für Godot-Projekte.
• Die Lizenzen sowie der Wartungszustand der einzelnen Lager müssen separat überprüft werden.
• Die Veröffentlichung offizieller Plugins bedeutet nicht, dass die Trainingsdaten, die Modellgewichte sowie die Online-Plattformen offen zugänglich sind.

Vorteile des Produkts

• Der Fokus liegt auf der Erstellung realistischer 3D-Gesichtsmodelle – ein klareres Ziel als bei allgemeinen 3D-Generatoren.
• Es unterstützt gleichzeitig die Eingabe von Bildern und Texten und eignet sich für Aufgaben zur Wiederherstellung sowie zur Erstellung origineller Charaktere.
• Es werden PBR-Texturen sowie animierbare Richtungen bereitgestellt, um den Einstieg in professionelle CG-Prozesse zu erleichtern.
• Durch die Integration mit Rodin und OmniCraft können auf derselben Plattform mehr 3D-Aufgaben bearbeitet werden.
• Business bietet Vorschauen, Geschäftslicenzierung und API-Fähigkeiten.
• Umfasst Ökosysteme wie Unity, Unreal Engine, Maya und NVIDIA Omniverse.
• GitHub bietet offiziell verschiedene Plugins und Referenzen für Integrationen.

Einsatzbeschränkungen und Hinweise

• ChatAvatar konzentriert sich nur auf Gesichtsdaten und ist kein umfassender Generator für Charaktere, Kleidung und Animationen.
• Die Preise für Geschäftskunden sind höher; Privatkunden, die nur selten nutzen, müssen zunächst die tatsächliche Produktionsmenge bewerten.
• Auf der offiziellen Preisseite wird nicht fest angegeben, wie viele Punkte für jedes ChatAvatar-Aktivum verbraucht werden.
• Die Bildqualität, Schatten, Verdeckungen und der Winkel beeinflussen die Identifizierung sowie die geometrische Rekonstruktion.
• Frisur, Ohren, Zähne, Augen und die Seitenkonturen können möglicherweise weiterhin künstlich korrigiert werden.
• Animierbarkeit bedeutet nicht, dass alle Anforderungen bezüglich der Gesichtsanimationen, der Mundbewegungen sowie der Einhaltung der Engine-Vorgaben direkt erfüllt werden.
• Hochwertige Filme und Spiele sowie 3D-gedruckte Objekte erfordern in der Regel weiterhin eine präzise Bearbeitung von Topologie und Materialien.
• Das Kernmodell sowie die Online-Plattform sind nicht offen zugänglich, und offizielle Erweiterungen können nicht zur Wiederherstellung der Erstellungsfunktionen im Offline-Modus verwendet werden.

Privatsphäre und Datensicherheit

• Personenfotos gehören zu den hochsensiblen biometrischen und portraitartigen Daten und sollten nur in minimaler Menge hochgeladen werden.
• Laden Sie keine Ausweisdokumente, Fotos von nicht autorisierten Mitarbeitern oder Bilder mit persönlichen Informationen hoch.
• Unternehmensprojekte sollten die Bedingungen für die Speicherung, Löschung und Verarbeitung von Daten sowie die Bedingungen der Dienste Dritter überprüfen.
• API-Schlüssel müssen in einem Schlüsselverwaltungssystem auf der Serverseite gespeichert werden und dürfen nicht in öffentliche Repositorien hochgeladen werden.
• Nach dem Herunterladen der Assets sollten diese gemäß den Berechtigungen des Projekts gespeichert werden. Modelle, mit denen die Identität einer realen Person rekonstruiert werden kann, dürfen nicht öffentlich geteilt werden.
• Für hochgeheime Projekte kann mit dem Enterprise-Team eine Lösung für eine private Bereitstellung sowie eine Trennung der Daten besprochen werden.

Plattform und Open-Source-Zustand

Grundlegende Informationen

Empfehlungswert

4,3 / 5. ChatAvatar bietet einen hohen professionellen Wert für realistische Gesichtsdarstellungen, digitale Avatare sowie Prototypen von Spielfiguren und kann in gängige CG-Workflows integriert werden; doch die Einstiegshürden sind hoch, das Risiko bei der Verwendung von echten Porträts ist erheblich, und die endgültigen Assets benötigen dennoch die Bearbeitung durch 3D-Künstler hinsichtlich Topologie, Materialien, Bündelung sowie Qualitätskontrolle.

Häufige Fragen

Was ist der Zusammenhang zwischen ChatAvatar und Hyper3D?

ChatAvatar ist ein Produkt auf der Hyper3D-Plattform, das speziell zur Erstellung von 3D-Gesichtsdaten entwickelt wurde, während Rodin für umfassendere Aufgaben zur Umwandlung von Texten oder Bildern in 3D-Daten zuständig ist.

Kann ChatAvatar kostenlos verwendet werden?

In der aktuellen Preisliste sind die Vorteile von ChatAvatar weder unter Free noch unter Creator aufgeführt. Business beinhaltet ausdrücklich eine 3D-Voransicht sowie eine kommerzielle Lizenz. Ob es eine vorübergehende Testmöglichkeit gibt, hängt von der Arbeitsumgebung nach dem Anmelden ab.

Erstellt ChatAvatar einen vollständigen Körper?

Seine Kernfunktion besteht in der Erstellung von 3D-Gesichtsmodellen. Einige Download-Pakete oder Import-Tools bieten möglicherweise auch Körper, Hinterkopf oder weitere Optionen an, doch er darf nicht als umfassendes Charaktersystem mit Kleidung, Skelett und Animationen angesehen werden.

Können generierte Assets für kommerzielle Zwecke verwendet werden?

Das Business-Paket beinhaltet eine kommerzielle Lizenz für ChatAvatar, doch der Nutzer muss weiterhin über die notwendigen Rechte verfügen, um Fotos, Porträts, Charaktere und Marken einzubringen, und muss zudem die aktuellen Dienstbedingungen einhalten.

Bietet ChatAvatar eine API?

Die Dokumentation für die Hyper3D-Entwickler beschreibt ChatAvatar und Rodin; Business umfasst den vollständigen API-Zugriff. Die konkreten ChatAvatar-Endpunkte sowie die Kontrollrechte sollten in der API-Konsole überprüft werden.

Ist ChatAvatar open source?

Kerngenerierungsmodelle und Online-Plattformen sind nicht open source. Die offiziellen Omniverse-Importwerkzeuge sowie weitere Plugins auf GitHub dienen lediglich als Komponenten zur Integration in Workflows.