Owlity

Einführung in die Tools

Owlity ist eine Plattform für die Automatisierung von Tests, die sich an Entwicklerteams und QA-Teams richtet. Im Moment besteht sie hauptsächlich aus drei Modulen: Owlity Eye, Owlity Wing und Owlity Mind. Die Benutzer können Webprozesse am Desktop aufzeichnen, diese anschließend in der Cloud in verschiedenen Browsern ausführen und über die Konsole die Beweise für Fehlschläge sowie Trends einsehen.

Die offizielle Website enthält weiterhin einige alte Seiten, die die eigenständige Scannung, von KI erstellte Tests sowie automatische Wartungsarbeiten bewerben. Auf der aktuellen Startseite sowie in der neuesten Preisliste wird jedoch betont, dass die Tests entweder vom Benutzer selbst aufgenommen werden müssen oder von dem QA-Team durchgeführt werden. Bei der Auswahl sollte man nicht davon ausgehen, dass die alten KI-Funktionen bereits im neuen Paket enthalten sind.

Hauptfunktionen

Owlity Eye-Test-Aufnahme

Eye ist ein kodenloser Desktop-Recorder, der Klicks, Eingaben, Navigationen, Uploads sowie Tab-Bewegungen der Benutzer auf Webseiten in wiederholbar testbare Abläufe umwandelt. Bei Bedarf an präziserer Steuerung können auch JavaScript-Ausführungen hinzugefügt werden.

• Der Schritt-Editor unterstützt Suchen, Sortieren, Gruppieren, Rückgängigmachen, Kopieren sowie den Start der Ausführung von einem bestimmten Schritt aus.
• Verifizierbare Elemente: Webadressen, Cookies, Variablen, E-Mails und Screenshot.
• Unterstützung für Bedingungen, Schleifen, Warten, Ansichtseinstellungen, dynamische Variablen und Datentabellen.
• Der Anmeldeprozess sowie die gängigen Schritte können als wiederverwendbare Flows gespeichert werden, wobei die Versionsgeschichte beibehalten wird.

Owlity Wing Cloud-Execution

Wing ist dafür verantwortlich, den Testplan in der Cloud auszuführen – wobei die Tests schrittweise und seriell oder parallel durchgeführt werden können, sowie in verschiedenen Umgebungen und Browsern wiederholt werden können.

• Unterstützt Chrome, Edge, Firefox und Safari.
• Es kann durch einen Timer, Cron, Deployment-Ereignisse oder CI/CD-Prozesse ausgelöst werden.
• Es werden automatische Wiederholungsversuche, paralleler Ablauf sowie Benachrichtigungen per E-Mail bei Erfolg oder Misserfolg bereitgestellt.
• Es kann mit GitHub Actions, Jenkins und Azure DevOps verbunden werden.

Analyse der Owlity-Mind-Ergebnisse

Mind speichert die Ergebnisse der Tests sowie der durchgeführten Pläne und zerlegt die fehlerhaften Abläufe in überprüfbare Zeitlinien und Beweismittelpakete.

• Für jeden Schritt können Videoaufnahmen, Screenshote, HTML-Code sowie Netzwerkprotokolle angezeigt werden.
• Es werden Betriebshistorie, Zeitverlauf der Laufzeiten, Änderungen im Teststatus sowie Vergleiche der Versionen bereitgestellt.
• Es ist möglich, CSV-Berichte zu exportieren und Probleme mit Jira oder Linear zu verknüpfen.
• Die Rollen sind in Owner, Lead, QA und Viewer unterteilt, um den Zugriff zu kontrollieren.

Anleitung zur Verwendung

1. Registrieren Sie einen Arbeitsbereich und laden Sie Owlity Eye herunter, um zu überprüfen, dass das Desktop-System sowie die Ziel-Webumgebung ordnungsgemäß funktionieren.
2. Öffnen Sie die zu prüfende Webseite und führen Sie nacheinander den Anmeldevorgang, die Registrierung, die Bezahlung oder andere wichtige Benutzerprozesse aus, damit Eye die Schritte aufzeichnet.
3. Fügen Sie Aussagen, dynamische Variablen, Datentabellen sowie die notwendigen Wartebedingungen hinzu und wiedergeben Sie es zunächst kostenlos lokal.
4. Erstellen Sie einen Plan für die entsprechenden Tests und wählen Sie den Browser, die Umgebung, die Parallelisierungsart sowie die Regeln für das Wiederholen bei Fehlern aus.
5. Verbinden Sie CI/CD oder legen Sie Zeitpläne fest, um im Cloud-Umfeld auszuführen und entsprechende Punkte zu verbrauchen.
6. Überprüfen Sie in Mind Videos, Screenshote, Netzwerkprotokolle und die Zeitachse der Schritte, um anschließend die Anwendung zu reparieren oder Tests durchzuführen.

Für welche Benutzer geeignet

• Es wird ein SaaS-Entwicklungsteam benötigt, das schnell Login-, Kauf-, Registrierungs- sowie wichtige Geschäftsprozesse abdecken kann.
• Es wird gehofft, die Anzahl der manuellen Tests sowie der Mitarbeiter für QA zu verringern, die für die Wartung von Selektoren und Skripten zuständig sind.
• Ein Continuous-Delivery-Team, das nach jedem Commit oder Deployment automatisch Regressionstests ausführt.
• Produktteams, die das Verhalten von Webseiten in Chrome, Edge, Firefox und Safari überprüfen müssen.
• Es ist zu hoffen, dass kleine und mittlere Unternehmen durch ein professionelles QA-Team bei Grenzfällen, negativen Szenarien und Fehlern unterstützt werden.

Preise und Pakete

Owlity berechnet derzeit Gebühren auf Basis von Cloud-Testing-Punkten – 1 Punkt ermöglicht es, in einem Browser bis zu 100 Testschritte auszuführen. Die lokale Aufnahme sowie der lokale Ausführung aller Tests sind kostenlos und unbegrenzt möglich.

Für Starter und Team beträgt der Zusatzpunkt jeweils 0,10 US-Dollar; die monatlichen Punkte werden nicht übertragen. Mehr als 100 Schritte oder das Ausführen derselben Prüfung in mehreren Browsern verbraucht weitere Punkte. Die Dauer einer einzelnen Prüfung beträgt standardmäßig maximal 30 Minuten.

Die offizielle Website bietet außerdem die Option „Managed QA“ an – dabei werden die Tests von einem QA-Team entworfen und durchgeführt. Auf der öffentlichen Seite werden die Preise nicht vollständig angezeigt. Auf der alten Preisliste wurden monatliche Gebühren von 299 bzw. 799 US-Dollar aufgeführt, was sich von den aktuellen Preisen unterscheidet. Die alten Angaben sollten daher ignoriert werden und man sollte sich an den Preisen auf der aktuellen Kalkulationsseite orientieren.

Vorteile des Produkts

• Aufzeichnung, Cloud-Ausführung und Ergebnisanalyse bilden einen vollständigen Workflow, der die Kosten für die Kombination mehrerer Testwerkzeuge senkt.
• Lokales Aufnehmen und Ausführen verbraucht keine Punkte; das Team kann zunächst mehrfach testen, bevor es Cloud-Ressourcen nutzt.
• Es werden komplexe Schritte, Datentabellen, wiederverwendbare Abläufe sowie JavaScript-Ausschnitte unterstützt, um ein Gleichgewicht zwischen Benutzerfreundlichkeit und Kontrollierbarkeit zu erreichen.
• Die Protokolle der Fehlerrückmeldungen enthalten Videos, Screenshote, HTML-Code sowie Netzwerkdaten, die eine schnelle Identifizierung von Problemen zwischen verschiedenen Browsern ermöglichen.
• Testzweige und Drittparteien-Konfliktlöser eignen sich für die parallele Wartung von Testressourcen durch mehrere Personen.

Einsatzbeschränkungen und Hinweise

• Derzeit richtet es sich hauptsächlich an Webanwendungen; die Abdeckung durch native Mobile-Anwendungen, Desktop-Software sowie nicht-browserbasierte Schnittstellen muss separat überprüft werden.
• Eine erhebliche Veränderung der Benutzeroberflächenstruktur sowie komplexe Iframes oder Shadow DOM können weiterhin eine Neuaufnahme oder das Hinzufügen von benutzerdefinierten Skripten erfordern.
• Automatische Wiederholungsversuche können gelegentliche Fehler verringern, können aber auch echte Instabilitätsprobleme verbergen; daher sollte eine Analyse unter Einbeziehung der ursprünglichen Beweise durchgeführt werden.
• Die aufgezeichneten Inhalte können Kontoinformationen, Cookies, Test-E-Mails sowie Geschäftsdaten enthalten. Es sollten spezielle Testkonten verwendet werden, und die Berechtigungen für die Zugangsdaten müssen eingeschränkt werden.
• Es bestehen deutliche Unterschiede zwischen der offiziellen alten AI-Seite und der aktuellen Produktseite; die Fähigkeiten zur automatischen Scannung, zur Erstellung mit KI sowie zur Selbstwartung sollten in der Demonstration einzeln überprüft werden.
• Die offizielle Website gibt ein Ziel von bis zu 95 % Abdeckung an, doch die tatsächliche Abdeckungsrate hängt von der Definition des Umfangs sowie vom Testdesign ab und kann nicht als Garantie für fehlerfreie Ergebnisse angesehen werden.

Plattformen und Integration

APIs, SDKs und Open Source

Die alte Version der Seite bewarb API- und CI/CD-Anbindungen, doch die aktuellen Dokumentationen legen den Schwerpunkt auf integrierte, vorgefertigte Pipelines sowie das Problemverfolgungssystem. Offiziell werden derzeit keine Referenzen zu Self-Service-APIs, SDKs, Authentifizierungsverfahren oder Geschwindigkeitsbeschränkungen bereitgestellt. Teams, die programmierbare Schnittstellen benötigen, sollten dies vor dem Kauf klären.

Die Nutzungsbedingungen betrachten die Plattform, den Code, die Datenbanken sowie die proprietären Schnittstellen als Urheberrechtseigentum von Owlity und beschränken das Reverse Engineering. Derzeit gibt es weder eine offizielle Open-Source-Lizenz noch ein offenes Repository für das Produkt, weshalb Owlity kein etabliertes Open-Source-Testframework darstellt.

Privatsphäre und Daten

Die Beschreibung der Datenschutzrichtlinien kann Informationen zu Konten, Geräten, Nutzung und Anmeldedaten enthalten. Während von Testläufen werden außerdem Screenshots, Videos, HTML-Dateien sowie Netzwerkprotokolle erzeugt. Das Team sollte darauf achten, keine echten Kundendaten zu verwenden, und vor der Anbindung an Drittsysteme die Speicherdauer sowie die Berechtigungen überprüfen.

Die Fristen für die Speicherung und Löschung der Daten nach Auflösung der Abonnementierung sind auf der neuen Preisanzeige nicht vollständig erläutert. Auf der alten Seite stand, dass die Daten 30 Tage lang aufbewahrt werden. Dies könnte sich geändert haben; wichtige Daten sollten im Voraus exportiert und mit dem Support-Team abgestimmt werden.

Häufige Fragen

Gibt es eine kostenlose Version von Owlity?

Es gibt einen einmaligen Probemonat mit 5 Cloud-Punkten – ohne Kreditkarte erforderlich. Die lokale Aufnahme und Ausführung ist in allen Varianten kostenlos und unbegrenzt möglich.

Wie viele Tests können mit einer Punktzahl durchgeführt werden?

Eine Punktzahl bezieht sich auf einen einzigen Testlauf in einem Browser und umfasst maximal 100 Schritte. Der Verbrauch steigt, wenn mehrere Browser verwendet werden oder die Anzahl der Schritte den Limitwert überschreitet.

Wird Owlity die Tests vollständig mit KI automatisch erstellen?

Die aktuelle Hauptseite erklärt hauptsächlich, wie Benutzer mit Eye aufnehmen können, oder dass die getesteten Anwendungen vom Managed QA-Team erstellt werden. Die Funktionen der künstlichen Intelligenz von der alten Seite sind weiterhin verfügbar, doch ob sie im aktuellen Konzept enthalten sind, muss bei den Verantwortlichen nachgefragt werden.