gui testautomatisierung – wie wird’s gemacht? · tester (ibm rational, aka robot), silktest...

21
GUI Testautomatisierung – Wie wird’s gemacht? Martin Moser Quality First Software GmbH [email protected] Tel: +49 8171 386480

Upload: others

Post on 19-Oct-2020

4 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

GUI Testautomatisierung –Wie wird’s gemacht?

Martin Moser

Quality First Software [email protected]

Tel: +49 8171 386480

Page 2: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

2 / 21© 2009 Quality First Software GmbH, www.qfs.de

Überblick

• Quality First Software GmbH• Warum Testen?• GUI Testautomatisierung• Demo QF-Test

Page 3: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

3 / 21© 2009 Quality First Software GmbH, www.qfs.de

Quality First Software GmbH

• Gegründet 2001

• Hauptprodukt: QF-Test – Professionelles GUI-Testen für Java und Web

• Sitz südlich von München

• Fokus auf GUI Testautomatisierung für Java und Web

• Mehr als 500 Kunden weltweit in allen Wirtschaftszweigen

Page 4: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

4 / 21© 2009 Quality First Software GmbH, www.qfs.de

Überblick

• Quality First Software GmbH• Warum Testen?• GUI Testautomatisierung• Demo QF-Test

Page 5: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

5 / 21© 2009 Quality First Software GmbH, www.qfs.de

Warum Testen?

Page 6: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

6 / 21© 2009 Quality First Software GmbH, www.qfs.de

Warum Testen?

Page 7: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

7 / 21© 2009 Quality First Software GmbH, www.qfs.de

Warum Testen?

Page 8: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

8 / 21© 2009 Quality First Software GmbH, www.qfs.de

Warum Testen?

Page 9: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

9 / 21© 2009 Quality First Software GmbH, www.qfs.de

Testziele

• Fehler so früh wie möglich finden◦ Kosten◦ Image

• Vertrauen in Software aufbauen

• Erfüllung funktionaler Anforderungen

• Erfüllung nicht funktionaler Anforderungen◦ Verhalten unter Stress/Last, Usability etc.

Page 10: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

10 / 21© 2009 Quality First Software GmbH, www.qfs.de

Überblick

• Quality First Software GmbH• Warum Testen?• GUI Testautomatisierung• Demo QF-Test

Page 11: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

11 / 21© 2009 Quality First Software GmbH, www.qfs.de

• Unit-Tests◦ sehr wichtig, aber isolierte Subsysteme◦ auf Klassenebene

• Integrationstests◦ testen das Zusammenspiel von Subsystemen◦ schwierig aufzusetzen

• Systemtests◦ testen das System als Ganzes

• GUI-Tests◦ testen nicht nur das GUI, sondern das System als Ganzes über das GUI

ein häufiges Missverständnis◦ werden aus Sicht des Endanwenders an einem „lebenden“ System

ausgeführt

Testarten

Page 12: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

12 / 21© 2009 Quality First Software GmbH, www.qfs.de

Vorteile der Testautomatisierung

• Häufigere und schnellere Testausführung kürzere Entwicklungszyklen

• Höhere Zuverlässigkeit (menschlicher Faktor)• Reproduzierbare Ergebnisse• Kostenreduktion

Page 13: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

13 / 21© 2009 Quality First Software GmbH, www.qfs.de

Vorteile der Testautomatisierung

• Häufigere und schnellere Testausführung kürzere Entwicklungszyklen

• Höhere Zuverlässigkeit (menschlicher Faktor)• Reproduzierbare Ergebnisse• Kostenreduktion

früher

besser

billiger

Page 14: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

14 / 21© 2009 Quality First Software GmbH, www.qfs.de

Erfolgsfaktoren für Testautomatisierung

• Kommunikation zwischen Testern und Entwicklern

• Erstellung wiederverwendbarer Testprozeduren

• Erstellung spezifischer Testbibliotheken

• Trennung von Testablauf und Testdaten

• Definierte Testumgebung

• Auswahl des geeigneten Tools

Page 15: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

15 / 21© 2009 Quality First Software GmbH, www.qfs.de

Knackpunkte für GUI Testautomatisierung

• Wiedererkennung der grafischen Komponenten

• Modularisierung / Wiederverwendbarkeit

• Wartungsaufwand

• Reporting

• Erweiterbarkeit

Page 16: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

16 / 21© 2009 Quality First Software GmbH, www.qfs.de

Modularisierung

Page 17: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

17 / 21© 2009 Quality First Software GmbH, www.qfs.de

Entwicklung testbarer GUIs

• Eindeutige Erkennung der grafischen Komponenten durch das Testtool

• Vergabe von Bezeichnern für Komponenten:◦ Component.setName() bei Swing

◦ Widget.setData(„name“) bei SWT

◦ „id“ o.ä. bei Web

Page 18: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

18 / 21© 2009 Quality First Software GmbH, www.qfs.de

Komponentenerkennung – Wahl des Bezeichners

• Eindeutig

• Sprechend

• Langfristig stabil

• Können u.a. auch verwendet werden für◦ Accessibility Interfaces / Screen Reader

◦ Hilfefunktionen

• Achtung bei dynamischer Generierung !!

Page 19: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

19 / 21© 2009 Quality First Software GmbH, www.qfs.de

Was sollen SIE sich merken?

• Testbare Software

• Modularisierung und Wiederverwendbarkeit der Tests

• Einsatz des geeigneten Tools

Page 20: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

20 / 21© 2009 Quality First Software GmbH, www.qfs.de

Verfügbare Automatisierungstools

• Open Source: Abbot, JFCUnit, Marathon – sehr entwicklerlastig• QuickTest Professional (Mercury/HP, aka WinRunner), XDE Functional

Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex)

• QF-Test (Quality First Software GmbH)

• Open-Source: Abbot• Open-Source: TPTP für Eclipse Plugins.• QuickTest Professional (HP), XDE Functional Tester (IBM), Silktest

(Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex)

• QF-Test (Quality First Software GmbH)

• Diverse kommerzielle Capture/Replay Tools in allen Preiskategorien, ebenso diverse Open Source Tools

• QF-Test (Quality First Software GmbH)

Java/SWT

Java/Swing

Web

Page 21: GUI Testautomatisierung – Wie wird’s gemacht? · Tester (IBM Rational, aka Robot), Silktest (Borland), TestPartner, QARun (Compuware), Squish (Froglogic), GuiDancer (Bredex) •

21 / 21© 2009 Quality First Software GmbH, www.qfs.de

Überblick

• Quality First Software GmbH• Warum Testen?• GUI Testautomatisierung• QF-Test Demo