Synchronisation für Traum von schwebenden Wolken

Was ist die Synchronisation für „Traum von schwebenden Wolken“?

Fuyun Meng Dubbing ist ein webbasiertes AI-Stimmen-Generierungstool, das Text in natürliche Sprachausgaben umwandeln kann.

Die Plattform bietet außerdem Mehrfachgespräche, Massen-Dubbing, Stimmenklonierung, Sprachumwandlung, Untertitel, KI-Musik und KI-Bildgenerierung.

Hauptfunktionen

• Die eingegebene Texte werden zu herunterladbaren Sprachdateien zusammengefasst.
• Mehr als 400 verschiedene Klangfarben für neuronale Netze.
• Umfasst mehr als 140 Sprachen, regionale Varianten und chinesische Dialekte.
• Anpassung der Sprachgeschwindigkeit, des Tonfalls, der Lautstärke und des emotionalen Stils.
• Für mehrere Charaktere jeweils eine Stimme einstellen und vollständige Dialoge erzeugen.
• Massenverarbeitung langer Texte durch asynchrone Aufgaben.
• Klone von Klangfarben erstellen mit kurzen Vokalsamples.
• Bestehende Aufnahmen in andere Klangfarben umwandeln.
• Für die Erkennung von Audio- und Videodaten sowie die Erstellung von Untertiteln.
• Kalibrierung und Konvertierung von SRT-, ASS- und VTT-Subtiteln.
• Musik oder Bilder mit Prompten erstellen.

Text zu Sprache

Nachdem der Benutzer Text eingegeben hat, die Sprache sowie den Ton gewählt hat, kann die Sprachausgabe erzeugt werden – es ist kein Client-Programm erforderlich.

Die HD-Klangfarbe kann je nach Stimmung des Textes angepasst werden, doch die automatische Emotionsbewertung kann den ursprünglichen Schaffensabsichten widersprechen.

Sprache und chinesische Dialekte

Offiziell wird angegeben, dass mehr als 140 Sprachen und Dialekte unterstützt werden, sowie über 400 KI-Stimmen verfügbar sind.

• Chinesisch umfasst Mandarin, Kantonesisch, Sichuanesisch und Shanghainesisch usw.
• Einige Seiten listen auch die Dialekte von Nordostchina, Henan, Shaanxi und Shandong auf.
• Englisch wird in Regionen wie den Vereinigten Staaten, Großbritannien, Australien und Kanada gesprochen.
• Dazu gehören auch Japanisch, Koreanisch, Französisch, Deutsch und Spanisch.
• Die Klangfarben und emotionalen Stile, die in verschiedenen Sprachen verwendet werden können, sind nicht ganz identisch.

Die Namen der Dialekte bezeichnen mögliche Modelle und bedeuten nicht, dass alle Nuancen bezüglich Akzent, Alter und Region genau wiedergegeben werden können.

Einzelfertigung und Begrenzung langer Texte

Lange Texte sollten in Kapitel unterteilt werden. Zuerst sollten kurze Abschnitte verwendet werden, um die Aussprache, die Charaktere sowie das Sprechtempo zu überprüfen, bevor eine vollständige Aufgabe erstellt wird.

Synchronisation für mehrstimmige Gespräche

Mehrpersonen-Dialoge ermöglichen es, verschiedenen Charakteren eigene Klangfarben, Sprechgeschwindigkeiten, Tonhöhen und Stile zuzuweisen, wodurch automatisch ein vollständiger Dialog erstellt wird.

1. Ordnen Sie das Drehbuch nach „Charakternamen mit einem englischen Kolon und der Dialogzeile“.
2. Stellen Sie sicher, dass dieselbe Figur stets denselben Namen verwendet.
3. Speichern Sie separate Ton-Einstellungen für die Erzählstimme und für jede Figur.
4. Erstellen Sie bitte einige Dialoge, um den Rollenwechsel zu überprüfen.
5. Umgang mit Homophonen, Zahlen und der Aussprache besonderer Personennamen.
6. Nach Überprüfung wird die vollständige Hörspiel- oder Dialogaufnahme erstellt.

Diese Funktion eignet sich für Hörbücher, Hörspiele, Interview-Vorführungen, Unterrichtsdialoge und Kurzfilmhandlungen.

Massen-Dubbing

Die Massenerstellungsfunktion ist für Hörbücher, Kursreihen und große Mengen an Werbetexten konzipiert und kann im Hintergrund asynchron ausgeführt werden.

• Jede Aufgabe kann maximal 100.000 Wörter verarbeiten.
• Es ist möglich, Texte oder tabellarische Inhalte in großen Mengen einzufügen.
• Es ist möglich, mehrere Aufgaben einzusenden und den Status später zu überprüfen.
• Es stehen Qualitätsoptionen wie Standard, HD und UHD zur Verfügung.
• Nach Abschluss sollte es so schnell wie möglich angehört und heruntergeladen werden.

Die asynchrone Generierungszeit hängt von der Länge des Textes, der Auftragswarteschlange sowie der Belastung des Modells ab; daher lässt sie sich nicht mit einer festen Anzahl von Sekunden garantieren.

Klangklonierung

Die Stimmenklonierung lernt die Klangmerkmale anhand von 5 bis 30 Sekunden langen Stimmproben und liest anschließend mit dieser Stimme neue Texte vor.

1. Verwenden Sie nur Ihre eigene Stimme oder Samples, für die eine ausdrückliche Genehmigung vorliegt.
2. Wählen Sie einen ruhigen Ort aus, um eine klare, rauschfreie Stimme aufzunehmen.
3. Vermeiden Sie, dass die Proben Musik, mehrere Personen, die sprechen, oder sensible Informationen enthalten.
4. Zuerst wird die Ähnlichkeit und Stabilität mit risikofreien Kurzsätzen getestet.
5. Bei der Veröffentlichung sollte angegeben werden, dass der Inhalt von KI erzeugt wurde, um die Zuhörer nicht in die Irre zu führen.
6. Nach der Verwendung sollten die nicht mehr benötigten Proben sowie die erstellten Dateien gelöscht werden.

Das Klonen einer anderen Person’s Stimme ohne Zustimmung kann die Persönlichkeitsrechte, die Privatsphäre oder die damit verbundenen Rechte am öffentlichen Auftritt verletzen und kann außerdem zur Betrugsmittel verwendet werden.

Unterschied zwischen Sprachumwandlung und Stimmenklonierung

Die Stimmenumwandlung bewahrt den Rhythmus und die Ausdrucksweise der ursprünglichen Sprache, während herkömmliche TTS-Systeme den Text neu erzeugen.

Untertitelgenerierung und Kalibrierung

Die Plattform kann Sprache aus Audio- oder Videodaten erkennen, SRT-Untertitel oder reinen Text exportieren und unterstützt die Übersetzung in mehreren Sprachen.

• Anpassung der gesamten Zeitachsenverschiebung der Untertitel.
• Zusammenfassen zu kurzer oder aufeinanderfolgender Untertiteltexte.
• Zerlegen zu langer, schwer lesbarer Untertitel.
• Konvertieren zwischen SRT, ASS und VTT.
• Korrektur von Personennamen, Ortsnamen, Zahlen und Fachbegriffen.
• Importieren Sie es in Jianying oder ein professionelles Schnittprogramm, um mit der Bearbeitung fortzufahren.

Automatische Untertitel können Wörter auslassen oder zeitlich fehlerhaft sein; vor der offiziellen Veröffentlichung müssen sie Satz für Satz überprüft werden.

Präzise SSML-Kontrolle

Benutzer, die sich mit den Parametern der Sprachsynthese auskennen, können mithilfe von SSML-Taggen Pausen, Betonung, Sprachgeschwindigkeit und Tonfall steuern.

KI-Musik und KI-Zeichnen

Neben Sprache bietet die Website auch eigenständige Kreativwerkzeuge wie Musik- und Bildgenerierung an.

• KI-Musik kann auf der Grundlage von Stilbeschreibungen und Texten Audiodateien erzeugen.
• Musik kann zur Untermalung von Videos, zum Einstieg in Podcasts oder zur Gestaltung der Atmosphäre in Spielen verwendet werden.
• KI-Bildgenerierung unterstützt chinesische Beschreibungen und verschiedene visuelle Stile.
• Bevor man ein Referenzbild bearbeitet, sollte man die Nutzungsrechte an den Materialien überprüfen.
• Die entstehenden Ergebnisse können den vorhandenen Werken oder Charakteren ähneln.

Der kommerzielle Einsatz von Musik und Bildern hängt außerdem von den eingesetzten Materialien, den dargestellten Personen, Markenzeichen sowie Rechten Dritter ab.

Anleitung zur Synchronisation von „Traum der schwebenden Wolken“

1. Öffnen Sie die offizielle Website – laden Sie keine Clients dritter Anbieter mit demselben Namen herunter.
2. Geben Sie Inhalte in das Textfeld ein oder laden Sie TXT- und DOCX-Dateien hoch.
3. Wählen Sie Sprache, Klangfarbe, Sprechgeschwindigkeit, Tonhöhe und Lautstärke aus.
4. Zuerst werden Namen, mehrdeutige Schriftzeichen, Zahlen und englische Wörter überprüft.
5. Überprüfen Sie mit einem Probetext, ob Klangfarbe und Stimmung passend sind.
6. Bei Bedarf werden Pausen, Stile oder Hintergrundmusik eingefügt.
7. Klicken Sie auf „Stimme erzeugen“ und hören Sie sich das Ergebnis in voller Länge an.
8. Lange Texte sollten mit der Massenerstellungsfunktion verwendet und in Abschnitten eingereicht werden.
9. Bei mehreren Charakteren werden zunächst die Charaktere konfiguriert, anschließend wird überprüft, zu welchem Abschnitt jeder Charakter gehört.
10. Laden Sie MP3s, Untertitel oder andere benötigte Dateien herunter.
11. Prüfen Sie vor der Veröffentlichung Autorisierungen, Fakten, Aussprache und die AI-Identifikation.
12. Sichern Sie die fertigen Produkte rechtzeitig ab, ohne sich auf vorübergehende Serverdateien zu verlassen.

Kostenlose Nutzung und Preise

Die offizielle Website kennzeichnet ihre Kernfunktionen als kostenlos, ohne Anmeldung und ohne tägliche oder wöchentliche Zeichenzahlbeschränkungen.

Auf der offiziellen Website werden sowohl Punkte für das Anmelden als auch Aktionen zur Gewinnung von Mitgliedschaften angezeigt. In Zukunft könnten die Vorteile oder die Abrechnungsbedingungen geändert werden – daher sollte man vor der Nutzung die Hinweise auf der Seite prüfen.

Ist eine Registrierung erforderlich?

Kostenlose Verfügbarkeit bedeutet nicht, dass für alle Account-Funktionen keine Registrierung erforderlich ist – Cloud-Synchronisierung und Aktionsvorteile erfordern einen Account.

Grenzen der kommerziellen Lizenzierung

Laut der offiziellen Website kann das generierte Audio ohne Wasserzeichen und kostenlos für kommerzielle Zwecke verwendet werden, doch die Nutzer müssen weiterhin sicherstellen, dass die Eingabe sowie die Verwendung im jeweiligen Kontext rechtlich zulässig sind.

• Originaltexte können nach Überprüfung des Inhalts für eigene Projekte verwendet werden.
• Für Artikel, Romane, Dialoge und Liedtexte Dritter sind die entsprechenden Genehmigungen erforderlich.
• Für die Klonierung von Stimmen ist eine ausdrückliche Genehmigung des Rechteinhabers der Stimme erforderlich.
• Hintergrundmusik, Referenzbilder und hochgeladene Videos haben ebenfalls eigene Rechte.
• Verwenden Sie keine synthetischen Stimmen, um sich als die eigene Person auszugeben und Stellungnahmen abzugeben.
• Werbung, Finanz- und Gesundheitsinhalte müssen strengeren Regeln unterliegen.

„Die Plattform erlaubt den kommerziellen Einsatz“ kann die Prüfung durch die Nutzer hinsichtlich Drittrechte, Persönlichkeitsrechte und branchenspezifischer Vorschriften nicht ersetzen.

Dateispeicherung und Privatsphäre

Auf den verschiedenen Seiten der offiziellen Website steht jeweils, dass die Audioaufnahmen 60 Minuten bzw. 10 Minuten lang aufbewahrt werden – es besteht somit Uneinigkeit in den offiziellen Angaben.

Die sicherste Vorgehensweise ist, die Datei unmittelbar nach der Erstellung herunterzuladen und die Cloud-Datei als vorübergehendes Datei zu betrachten.

1. Füllen Sie im zu bearbeitenden Text keine Passwörter, Ausweisdokumente oder Kundengeheimnisse ein.
2. Die Klonsamples speichern nur den notwendigen Inhalt und entfernen die Hintergrundgespräche.
3. Erteilen Sie vor dem Hochladen von Meetings und Kursen die Genehmigung der Teilnehmer sowie der Rechteinhaber.
4. Nach der Erstellung sollte das File sofort heruntergeladen und überprüft werden, ob es abspielbar ist.
5. Löschen Sie die lokale Historie und Rolleneinstellungen auf dem gemeinsam genutzten Gerät.
6. Überprüfen Sie bei Nichtverwendung eines Kontos die Cloud-Synchronisierung sowie den Abmelde-Link.

Client, API und Open Source

Die offizielle Website weist darauf hin, dass Apps und Computerprogramme mit dem gleichen Namen möglicherweise unoffizielle Kopien sind; vor der Installation sollte die Herkunft überprüft werden.

Sicheres Einsatz von Stimmenklonen

• Die Klonierung der Stimmen von Prominenten, Kollegen oder Verwandten zur Täuschung ist verboten.
• Es werden keine Anrufe zur Durchführung von Überweisungen, zur Anfrage von Authentifizierungscodes oder zur Überprüfung der Identität erstellt.
• Fügen Sie bei der Veröffentlichung eine klare Angabe zur künstlichen Intelligenz-Synthese hinzu.
• Teamprojekte behalten den Autorisierungsrahmen und die Rücknahmemechanismen bei.
• Wenn festgestellt wird, dass Geräusche missbraucht werden, sollten Beweise gesichert und die Plattform kontaktiert werden.
• Für die wichtige Identitätsüberprüfung werden Rückrufe und mehrfaktorielle Authentifizierung verwendet.

Nutzungsbeschränkungen

• Die kostenlosen Regeln, Aktivitäten und verfügbaren Modelle können sich je nach Betriebsbedingungen ändern.
• Bei einer einzigen TTS-Ausgabe von mehr als 5000 Wörtern kann es zu einem Abbruch kommen.
• Batch-Aufgaben müssen in der Warteschlange warten; es wird keine feste Fertigstellungszeit garantiert.
• Die von verschiedenen Klangfarben unterstützten Sprachen und emotionalen Stile unterscheiden sich.
• Automatische Untertitel, mehrdeutige Wörter und Dialekte können falsch erkannt werden.
• Die Angaben zur vorübergehenden Audio-Speicherdauer auf der offiziellen Website sind uneinheitlich.
• Die Plattform bietet keine externen API-Anbindungen, sodass man die Schnittstellen nicht selbst abrufen kann.

Häufige Fragen

Welche Funktionen hat hauptsächlich die Synchronisation von „Flüchtige Wolken-Träume“?

Es bietet Text-zu-Stimme-Umwandlung, Mehrpersonengespräche, Massen-Untertitelung, Stimmenklonierung, Stimmumwandlung, Untertitel, KI-Musik und KI-Bildgenerierung.

Ist die Synchronisation von „Flüchtige Wolken-Träume“ wirklich kostenlos?

Die offizielle Website gibt an, dass die Kernfunktionen kostenlos und ohne Anmeldung verfügbar sind. Auf der Seite gibt es jedoch auch Punktesysteme sowie Mitgliedervorteile; die Regeln könnten sich in Zukunft ändern.

Wie viele Wörter können bei der Stimmenübertragung für „Schwimmende Wolken-Träume“ pro einmal umgewandelt werden?

Bei der Umwandlung von normalen Texten in Sprache sind maximal 5000 Wörter pro Auftrag möglich. Für längere Texte können mehrere Aufträge verwendet werden; pro Auftrag können bis zu 100.000 Wörter verarbeitet werden.

Kann das von Float Cloud Dream generierte Audiomaterial für kommerzielle Zwecke verwendet werden?

Die offizielle Website besagt, dass eine kostenlose kommerzielle Nutzung möglich ist, doch die Nutzer müssen dennoch sicherstellen, dass für den Text, die Tonbeispiele, die Musik, die Bilder sowie die Darstellungen von Personen eine legale Lizenz vorliegt.

Gibt es eine offizielle App für die Synchronisation von „Fuyun Meng“?

Nein, die offizielle Website macht klar, dass es weder Apps noch Computerprogramme gibt. Jeder Client mit demselben Namen sollte sorgfältig überprüft werden, um sicherzustellen, dass es sich nicht um ein gefälschtes Produkt handelt.

Gibt es eine offene API für die Stimmen in Float Cloud Dream?

Nein, die offizielle Website besagt ausdrücklich, dass keine externen APIs bereitgestellt werden und außerdem Aufrufe von nicht im Rahmen der Website verfügbaren Schnittstellen untersagt sind.

Wie lange wird die erstellte Audio-Datei auf dem Server gespeichert?

Auf der offiziellen Website werden jeweils Angaben von 10 Minuten und 60 Minuten gemacht – es besteht somit Uneinigkeit. Es wird empfohlen, das Dokument unverzüglich nach seiner Erstellung herunterzuladen und eine eigene Kopie anzufertigen.