The Face++ AI-Plattform von Megvii

Was ist Megvii Face++?

Face++ ist eine offene Plattform für Computervision, die von Beijing Megvii Technology betrieben wird.

Entwickler können über öffentliche Cloud-APIs, vernetzte oder offline-SDKs, Server-SDKs sowie Private-Cloud-Lösungen auf visuelle Funktionen zugreifen.

Kernkompetenzen

Gesichtserkennung, Vergleich und Suche

Der Schwellenwert sollte unter Berücksichtigung des Geschäftsrisikos sowie der Fehler- und Ablehnungsraten bewertet werden; es dürfen nicht einfach die aus den Beispielen entnommenen Werte übernommen werden.

Gesichtspunkte und 3D-Analyse

Die Plattform bietet Funktionen wie gewöhnliche Keypoints, dichte Keypoints, Gesichtsmerkmale sowie die 3D-Rekonstruktion von Gesichtern.

• Schlüsselpunkte können zur Ausrichtung, für Effekte und zur Bearbeitung von Porträts verwendet werden.
• Dichte Schlüsselpunkte dienen zur präziseren Positionierung der Konturen.
• 3D-Rekonstruktion wird zur Erstellung geometrischer Informationen von Gesichtern verwendet.
• Die Hautanalyse dient zur unterstützenden Beurteilung des visuellen Zustands.
• Diese Ausgaben können keine Ersatz für medizinische Untersuchungen sein.

Bildbearbeitung von Porträts

Face++ bietet Funktionen wie Gesichtsfusion, Schönheitsverbesserung, Filter, Sticker sowie virtuelles Make-up-Testen.

• Erteilen Sie vor der Verwendung von Fotos von echten Personen eine ausdrückliche Genehmigung.
• Vermeiden Sie die Erstellung von Inhalten, die zur Identitätsbetrug verwendet werden können.
• Schönheitseffekte dürfen nicht für irreführende medizinische Werbung verwendet werden.
• Für kommerzielle Materialien müssen die Urheberrechte an den Porträts und Vorlagen überprüft werden.
• Synthetische Inhalte werden gemäß den Regeln entsprechend gekennzeichnet.

Menschliche Erkennung

Die Fähigkeiten des menschlichen Körpers umfassen die Überprüfung von Einzelpersonen oder mehreren Personen, Eigenschaften, 22 Knochenpunkte, Body-Tracking sowie die Erkennung von Gesten.

• Komplexe Verdeckungen und Ausrichtungen können die Genauigkeit verringern.
• Knochenpunkte können nicht für diagnostische Zwecke im Medizinbereich verwendet werden.
• Die Eigenschaften des menschlichen Körpers sind probabilistische Ergebnisse.
• Bei der Keying-Technik müssen Haare und Ränder überprüft werden.
• Die derzeit unterstützten Kategorien für die Gestenerkennung sind in der Dokumentation festgelegt.

OCR-Texterkennung

Bilderkennung

Die Bildschnittstelle umfasst spezielle Aufgaben wie die Erkennung von Kennzeichen, Nasenmuster von Hunden sowie die Identifizierung von Szenen und Objekten.

• Bei Kennzeichen bei Nacht müssen Reflexionen und Verdeckungen weiterhin berücksichtigt werden.
• Die Erkennung anhand der Nasenlinie des Hundes kann die gesetzliche Registrierung nicht ersetzen.
• Die Ausgabe von Szenen und Objekten ist eine Vorhersage des Modells.
• Das Produktionssystem muss eine Zuverlässigkeitsstufe sowie eine manuelle Überprüfung vorsehen.
• Stellen Sie vor dem Speichern des Bildes sicher, dass eine rechtmäßige Verarbeitungsgrundlage vorliegt.

Öffentliche Cloud-API

Die API der öffentlichen Cloud eignet sich für den Aufruf von Online-Anwendungen wie Mini-Apps, H5-Seiten, Webseiten und Apps.

• Erstellen Sie in der Konsole eine API-Key und ein Secret.
• Der Schlüssel wird nur auf der Serverseite gespeichert.
• Senden Sie gemäß der Dokumentation Bilder oder die URLs der Bilder.
• Umgang mit Zeitüberschreitungen, Bandbreitenbeschränkungen und Fehlerrcodes.
• Die Aufrufe werden protokolliert, aber das ursprüngliche Bild wird im Log nicht gespeichert.

SDK und private Bereitstellung

Das SDK eignet sich für Videoströme auf Mobilgeräten und PCs, wohingegen private Lösungen für strengere Anforderungen hinsichtlich Daten, Netzwerk oder Verzögerung verwendet werden.

Anleitung zur Anbindung der Face++ API

1. Registrieren Sie ein Konto in der Face++-Konsole.
2. Lesen Sie die Anleitung zu den erforderlichen Schnittstellen und den Datenkonformitätsanforderungen.
3. Antrag auf Testdienste und API-Schlüssel stellen.
4. Konfigurieren Sie Schlüssel und Zugriffssteuerung auf der Serverseite.
5. Testen mit nicht echten oder nicht autorisierten Daten.
6. Senden Sie das Bild sowie die notwendigen Parameter gemäß der Dokumentation.
7. Analyseergebnisse, Zuverlässigkeit und Fehlercodes.
8. Einstellen von Geschäfts-Schwellenwerten und Prozessen für manuelle Überprüfung.
9. Testen von Szenarien der Fehlidentifizierung, Ablehnung, Verdeckung und Angriff.
10. Fertigstellung der Bewertung der Auswirkungen auf den Schutz personenbezogener Daten.
11. Auf den regulären Service wechseln und Kosten sowie QPS überwachen.
12. Löschen Sie regelmäßig die nicht mehr benötigten Daten.

API-Preise nach Verbrauch

Der offizielle API-Preisverzeichnis wurde am 6. Juni 2023 aktualisiert; im Folgenden sind einige repräsentative Einzelpreise aufgeführt.

Der Preis wurde am 30. August 2026 überprüft. Das Dokument wurde bereits früh aktualisiert; vor dem Kauf muss unbedingt die aktuelle Version in der Konsole herangezogen werden.

Paketzeit und Anzahl der Pakete – Preis pro Paket

Fehlerhafte Aufrufe können ebenfalls Gebühren verursachen.

Bei Pay-as-you-go-Diensten werden nicht nur Gebühren für erfolgreiche Aufrufe berechnet, sondern auch geringe Gebühren für fehlerhafte Parameter sowie für Verzögerungen bei der Herunterladung von Bildern.

• Teilaufrufe der Kategorie 400 werden mit 0,0005 Yuan berechnet.
• Für eine Überlaufzeit bei der Herunterladung von Bildern mit der Nummer 412 wird ein Betrag von 0,001 Yuan berechnet.
• Überprüfen Sie vor dem Go-Live die Parameter sowie die Zugänglichkeit der Bilder.
• Versuchen Sie nicht, Anfragen, bei denen ein Misserfolg bereits feststeht, endlos erneut abzusenden.
• Überwachen Sie durch Rechnungen abweichende, fehlerhafte Verbräuche.

Was muss man vor dem Kauf überprüfen?

• Interface-Version und genauer Einzelpreis.
• Unterschied zwischen dem QPS bei Tests und im regulären Betrieb.
• Anwendbare Kosten nach Verbrauch, für einen Zeitraum oder pro Anzahl von Malen.
• SDK-Plattform, Anzahl der Geräte und Gültigkeitsdauer der Lizenz.
• Kosten für fehlgeschlagene Aufrufe, Speicherung und Wertsteigerungsdienste.
• Verträge, Rechnungen und Servicelevel.
• Datenlöschung, Privatisierung und Austrittsmechanismen.

Biometrische Identifizierung und Einhaltung von Datenschutzvorschriften

Gesichter, Ausweisdokumente und personenbezogene Daten sind äußerst sensibel und dürfen nicht einfach aufgrund der technischen Verfügbarkeit erfasst werden.

• Klare, vernünftige und notwendige Verarbeitungszwecke.
• Vor der Entnahme erfolgt eine ausreichende Aufklärung.
• Erlangung einer gesonderten Zustimmung oder anderer Rechtfertigungen gemäß dem Gesetz.
• Es sollten vernünftige Alternativen ohne Gesichtserkennung bereitgestellt werden.
• Fertigstellung der Bewertung der Auswirkungen auf den Schutz personenbezogener Daten.
• Die Aufbewahrungsfrist sowie die Zugriffsberechtigten sind streng begrenzt.
• Verschlüsselung von Übertragungen, Vorlagen und Backups.

Modellverzerrung und Schwellenwerttest

• Verwenden Sie einen Testdatensatz mit der tatsächlichen Verteilung der Bevölkerung.
• Erstellen Sie getrennt die Statistiken für die Fehlakzeptanz- und Fehlablehnungsrate.
• Testen Sie Alter, Beleuchtung, Haltung und Verdeckung.
• Hohe-Risiko-Ergebnisse dürfen nicht allein von Algorithmen bestimmt werden.
• Einführung von Beschwerde- und manuellen Korrekturkanälen.
• Nach dem Aktualisieren des Modells wird es erneut überprüft.

GitHub und der Open-Source-Zustand

Die offizielle GitHub-Organisation von FacePlusPlus hat Repositorys für SDKs wie Java und Matlab veröffentlicht, von denen einige für die alte V2-API bestimmt sind.

• Die Veröffentlichung eines Beispiel-SDKs bedeutet nicht, dass die Cloud-Plattform open source ist.
• Überprüfen Sie vor dem Anschluss das Update-Datum des Lagerbestands sowie die Version der Schnittstelle.
• Dritte PHP- oder Framework-Verpackungen sind kein offizielles SDK.
• Das MegEngine-Projekt von Megvii weist eine andere Lizenzierung als der Face++-Dienst auf.
• Die Kern-Unternehmensalgorithmen und Plattformdienste sind nicht vollständig open source.

Für welche Entwickler und Unternehmen geeignet

• Das Team, das Systeme zur Unterstützung der Identitätsüberprüfung entwickelt.
• Unternehmen, die Anwendungen für Porträtfotografie und Schönheitsindustrie entwickeln.
• Entwickler, die Körperhaltung und Keying benötigen.
• Die Bearbeitung von Dokumenten und Belegen mittels OCR.
• Systeme, die eine Kennzeichen- oder Szenenerkennung benötigen.
• Es gibt Organisationen, die eine Offline-Lösung oder Privatisierung benötigen.

Vorteile des Produkts

• Die Fähigkeiten der Computervisierung sind sehr umfassend.
• Gleichzeitig werden API, SDK und Private-Cloud-Lösungen bereitgestellt.
• Die offiziellen Dokumente listen die detaillierten Schnittstellen und Preise auf.
• Unterstützung für Tests, nach Verbrauch, als Pakete nach Zeit und nach Anzahl der Aufrufe.
• Es werden Dokumente zur Konformität, Sicherheit und Zugang bereitgestellt.

Einsatzbeschränkungen und Hinweise

• Einige offizielle Preisdokumente wurden bereits früh aktualisiert.
• Bei den Modellergebnissen treten Fehleinschätzungen und Gruppenunterschiede auf.
• Auch einige fehlgeschlagene Aufrufe können Kosten verursachen.
• Gesichts- und Ausweisdaten müssen streng konform sein.
• Der Testdienst kann nicht direkt für die Produktion verwendet werden.
• Die alte Version des GitHub SDK ist möglicherweise nicht mit den aktuellen Schnittstellen kompatibel.
• Die endgültige Entscheidung muss eine manuelle Überprüfung beinhalten.

Häufige Fragen

Welche Funktionen bietet Face++ hauptsächlich?

Es bietet Gesichtserkennung, Porträterkennung, Körpererkennung, OCR sowie Bilderkennung und unterstützt API, SDK und private Anbindungen.

Kann Face++ kostenlos getestet werden?

Es ist möglich, einen kostenlosen Testdienst anzufordern, doch die Werte für QPS, Stabilität und Funktionen unterscheiden sich von denen des regulären Produktivdienstes.

Was ist der Unterschied zwischen Gesichtserkennung, -vergleich und -suche?

Die Erkennung dient der Lokalisierung von Gesichtern, das Vergleichen dient dem Abgleich zweier Gesichter, während die Suche nach ähnlichen Objekten in einer Gesichtsbibliothek erfolgt.

Wie wird die Face++ API abgerechnet?

Es werden Abrechnungsmodelle nach Verbrauch, nach Zeitrahmen sowie nach Anzahl der Vorgänge angeboten. Die Kosten für die Erkennung von Gesichtern betragen 0,001 Yuan pro Vorgang, während die Kosten für den Vergleich 0,01 Yuan pro Vorgang liegen.

Wird eine fehlgeschlagene API-Aufrufgebühr berechnet?

Für bestimmte Parameterfehler sowie Verzögerungen bei der Herunterladung von Bildern wird eine Gebühr erhoben. Die genauen Fehlercodes und die Preise entnehmen Sie bitte den aktuellen offiziellen Dokumentationen.

Ist Face++ eine Open-Source-Plattform?

Nein, offiziell wurden einige SDK-Repositories veröffentlicht, aber die Cloud-Plattformen, die Kernalgorithmen sowie die kommerziellen Dienste sind nicht vollständig open source.

Kann die Gesichtserkennung als einziger Entscheidungsgrund herangezogen werden?

Es wird nicht empfohlen; für hochriskante Geschäftsabläufe sollten manuelle Überprüfungen, alternative Verifizierungsmethoden, Beschwerdemechanismen sowie kontinuierliche Abweichungstests eingerichtet werden.