Courbure dans les nuages

Qu’est-ce que la courbure dans les nuages ?

Curvature LiveData est un ensemble de services cloud en temps réel pour l’interaction et l’IA, destinés aux applications de jeux, sociales, de diffusion en direct et internationales.

Il intègre les messages en temps réel, la communication audiovisuelle, la traduction multilingue, la reconnaissance vocale et la modération du contenu dans une plateforme pour développeurs.

Fonction principale

• Fournit un service de messagerie en temps réel mondial.
• Prend en charge l’interaction audiovisuelle un à un et en groupe.
• Effectuer une traduction de texte en temps réel multilingue.
• Convertir la parole multilingue en texte.
• Traduire le contenu audio en texte dans la langue cible.
• Vérifier le texte des chats multilingues.
• Identifier le contenu illégal dans l’image.
• Détecter les informations de risque dans l’audio.
• Capturer des images vidéo et les examiner.
• Fournit une API REST et un SDK pour les clients.
• Fournit des tests de console et des statistiques de données.
• Projet de génération de voix ViiTorVoice open source.

À qui s’adresse-t-il

Messages en temps réel RTM

RTM est utilisé pour transmettre des messages de chat, d’état et commerciaux ; la documentation officielle indique que le délai moyen mondial de transmission d’un message est d’environ 100 millisecondes.

Le retard réel dépend de la région de l’utilisateur, de la qualité du réseau, de la taille du message et du temps de traitement du serveur ; il convient de se fier aux tests de charge.

• Prend en charge les messages en temps réel à haute concurrence.
• Peut être utilisé pour les jeux et les interactions sociales.
• Prend en charge l’extension horizontale et l’augmentation dynamique de la capacité.
• La console peut simuler l’interface serveur.
• Fournit des messages et des statistiques sur l'utilisation des données.
• On peut combiner les compétences en traduction et en révision.

Audio et vidéo en temps réel RTC

Le RTC est adapté aux scénarios à faible latence tels que les salles de chat vocal, le jeu en groupe, la diffusion en direct avec connexion audio, les conférences vidéo et l’interaction en ligne.

1. Déterminer le mode d’appel un à un ou en groupe.
2. Sélectionnez la plateforme de terminal à prendre en charge.
3. Créez un projet et obtenez les identifiants d’accès.
4. Intégrer le SDK correspondant du client.
5. Mettre en œuvre la logique des chambres, des utilisateurs et des permissions.
6. Tester les réseaux faibles, les interruptions de connexion et le changement de dispositif.
7. Ajouter des mécanismes d’enregistrement, de vérification et de plainte.
8. Effectuer des tests de concurrence et de coûts avant le lancement.

Traduction de texte en temps réel

La traduction de texte en temps réel est optimisée pour le langage oral en chat, les abréviations et les expressions en ligne ; la page d’accueil du site prend en charge la traduction mutuelle dans plus de 50 langues.

Reconnaissance vocale et traduction vocale

La reconnaissance vocale convertit l’audio en texte, tandis que la traduction vocale produit ensuite le texte dans la langue cible.

Le nombre de langues pris en charge varie selon les produits ; avant la connexion, il convient de vérifier le langage source, le langage cible et les exigences audio selon la documentation de l’interface.

• Pour les sous-titres en temps réel lors des streams.
• Adapté aux interactions vocales multilingues.
• Adapté à la transcription de conférences et d’enseignement.
• Service de personnalisation des termes sectoriels.
• On peut combiner avec le filtrage des mots sensibles.
• Il est donc nécessaire de procéder à une vérification manuelle par échantillonnage.

Vérification du contenu multimodal

L’audit automatique peut commettre des erreurs ou omettre des cas ; pour les contenus à haut risque, les recours et les décisions de bannissement, un processus de révision manuelle doit être maintenu.

Tutoriel complet pour l’intégration de la courbure dans le cloud

1. Inscrivez-vous et créez les informations de l’entreprise.
2. Créer des filiales, des équipes de projet et des projets.
3. Choisissez les services d’interaction en temps réel, de traduction ou de révision.
4. Vérifier la plateforme cible et la version du SDK.
5. Obtenir le justificatif du projet et le conserver en sécurité.
6. Commencez par effectuer la simulation de l’interface dans la console.
7. Intégrer la fonctionnalité minimale dans l’environnement de test.
8. Gérer les délais d’expiration, les tentatives de réessai et les rappels répétés.
9. Tester la qualité de la traduction à l’aide de corpus réels.
10. Mettre en place un processus de révision manuelle pour les résultats de l’audit.
11. Statistiques sur le nombre de caractères, de minutes et d’appels d’images.
12. Définir le budget, les alertes et les limites de flux.
13. Terminer les vérifications de conformité à la vie privée et aux réglementations locales.
14. Mettre en ligne en niveaux de gris et surveiller continuellement les données.

Mode de facturation et prix

La courbure dans le cloud est facturée en fonction du produit, du volume d’utilisation et du coefficient de détection ; les prix des forfaits spécifiques doivent se référer à la console ou à la proposition commerciale.

Les coefficients sont utilisés pour convertir la quantité facturée selon le forfait et ne sont pas équivalents au prix unitaire en yuans ; le coût final doit être calculé en fonction de la capacité du forfait.

Comment contrôler les coûts

• Sélectionnez les scénarios de test nécessaires en fonction des activités réelles.
• Éviter de soumettre deux fois le même contenu.
• Pour un texte long, définir d’abord une stratégie de segmentation.
• La fréquence d’encadrement de la vidéo est ajustée en fonction du risque.
• Définir un plafond de tentatives pour les échecs.
• Distinguer les tests, la production et les différents projets.
• Vérifier régulièrement la quantité utilisée et la facture.
• Alerte en temps opportun lorsque l’on s’approche de la limite du forfait.

Qu’est-ce que ViiTorVoice-NAR ?

ViiTorVoice-NAR est un système de génération de voix non auto-régressif publié par viitor-ai, permettant le clonage de voix et l’édition locale de la voix.

• Utiliser l’audio de référence pour cloner le son.
• Seul le fragment local modifié est regénéré.
• Soutien au contrôle des émotions et des étiquettes paralinguistiques.
• Fournit des services gRPC séparés.
• Fournit un gateway HTTP bout en bout.
• Prend en charge Docker et le déploiement local.
• Les poids du modèle publiés sont sous licence Apache-2.0.

Guide de déploiement local ViiTorVoice

1. Préparer un environnement Linux, Python et GPU compatible.
2. Téléchargez le dépôt officiel viitor-voice-nar.
3. Lisez la licence de lecture et les conditions du modèle source.
4. Script d’initialisation de l’environnement de exécution.
5. Téléchargez le fichier de modèle dans le répertoire spécifié.
6. Vérifier que le fichier du modèle n’est pas un lien symbolique invalide.
7. Démarrer les services d’encodage, de modélisation et de décodage.
8. Vérifier l’état de santé HTTP.
9. Utiliser des enregistrements audio de référence autorisés pour les tests.
10. Comparer les timbres, la prononciation et les joints locaux.
11. Ajouter l’authentification, le contrôle du débit et les journaux d’audit.
12. Il ne pourra être utilisé à nouveau qu’après une évaluation de sécurité.

Exigences de conformité pour la clonage de voix

La clonage de voix ne peut être utilisé qu’avec sa propre voix ou des fichiers audio pour lesquels une autorisation explicite a été obtenue ; il est interdit de créer du contenu trompeur visant à se faire passer pour autrui.

• Enregistrer la portée de l’autorisation du propriétaire de la voix.
• Définir l’usage, la durée et les canaux de publication.
• Il est interdit de se faire passer pour des personnalités publiques ou des organismes réels.
• Ne doit pas être utilisé à des fins de fraude, de harcèlement ou d’endossement frauduleux.
• Identifier clairement l’audio synthétique.
• Enregistrer les comptes-rendus de génération et le journal des opérateurs.
• Fournir des mécanismes de révocation de l’autorisation et de suppression.
• Des restrictions plus strictes s’appliquent aux voix de mineurs.

Sécurité des données et vie privée

• Les preuves sont stockées uniquement sur le serveur sécurisé.
• Les données de chat et audio sont minimisées selon les besoins.
• Règles de transmission des données pour la vérification des opérations transfrontalières.
• Restreindre les employés à exporter le contenu original de l’audit.
• Les données sensibles doivent être démasquées avant d’être enregistrées dans le journal.
• Mettre en place un processus d’examen pour les mises à jour des modèles et du SDK.
• Supprimer les données non plus nécessaires à l’expiration.

API, SDK et situation du logiciel open source

Avantages du produit

• Intégration de l’interaction en temps réel et des capacités d’IA.
• Couvre les scénarios de texte et de voix multilingues.
• Prend en charge la vérification de texte, d’images, d’audio et de vidéo.
• Idéal pour les jeux, les réseaux sociaux et la diffusion en direct à l’international.
• Fournit des documents complets, une API et un SDK.
• Des projets de voix open source pouvant être déployés localement.

Restrictions d'utilisation

• Le prix du forfait complet doit être demandé ou consulté en se connectant.
• Les résultats de traduction et de reconnaissance peuvent contenir des erreurs.
• La modération du contenu ne peut pas remplacer complètement l’intervention humaine.
• Les performances en temps réel sont affectées par le réseau et la localisation.
• Le nombre de langues prises en charge varie selon les produits.
• Les projets de voix open source nécessitent des ressources de calcul locales.
• La clonage de voix nécessite une autorisation explicite.

Questions fréquentes

Quels services la courbure dans les nuages offre-t-elle principalement ?

Il offre des services de messages en temps réel, de vidéo et d’audio en temps réel, de traduction de texte multilingue, de reconnaissance vocale, de traduction vocale ainsi que de modération de contenu multimodal.

Quelle modération du contenu est prise en charge par la courbure dans le cloud ?

Prend en charge l’audit de texte, d’images, d’audio et de vidéo ; les vidéos sont généralement traitées sous forme de captures d’écran, mais les résultats à haut risque doivent faire l’objet d’une vérification manuelle.

Comment est facturée la courbure dans les nuages ?

La plateforme facture en fonction du produit, du volume d’utilisation et du coefficient ; pour les quantités excédentaires par rapport au forfait annuel, le tarif standard est de 1,6 yuan par mille unités de consommation, et le prix total du forfait est fixé selon les tarifs en vigueur.

La courbure dans les nuages prend-elle en charge la traduction en temps réel ?

Prend en charge la traduction en temps réel de texte et de voix ; les différentes interfaces supportent des gammes de langues variées, il convient de vérifier selon le document du produit spécifique avant l’intégration.

Que peut faire ViiTorVoice-NAR ?

Il peut cloner des voix en se basant sur des enregistrements audio autorisés, et il peut également identifier les modifications de texte pour ne re-générer que les segments vocaux correspondants.

ViiTorVoice-NAR peut-il être utilisé à des fins commerciales ?

La page du modèle principal est sous licence Apache-2.0, mais avant une utilisation commerciale, il est nécessaire d’examiner le code, les composants du modèle, les données d’entraînement et les licences dépendantes, ainsi que d’obtenir une autorisation audio.

La plateforme de courbure cloud est-elle open source ?

Les plateformes cloud commerciales ne sont pas open source ; bien que l’entreprise ait rendu publics des projets indépendants tels que ViiTorVoice-NAR, on ne peut pas assimiler un seul répertoire open source à l’open source de toute la plateforme.