Das Problem
Im Testcenter der PLEdoc war mein Job, Anwendungen manuell zu testen. Die Testfälle wurden von Hand geschrieben. Sie waren mir zu grob und zu unspezifisch, und das Wissen dazu hing an einzelnen Personen. Niemand hat mich gebeten, ein Tool zu bauen. Mich hat der Prozess gestört, also habe ich es gemacht.
Was ich gebaut habe
2StepsAhead ist eine Chrome-Extension. Sie nimmt eine manuelle Testdurchführung auf, Bildschirm und Audio zugleich. Whisper transkribiert das Gesprochene, Azure OpenAI erzeugt daraus fertige Testfälle im Xray-Format. Aus derselben Aufnahme entstehen zusätzlich Schritt-für-Schritt-Anleitungen und Wissensartikel, damit das Wissen nicht mehr an einzelnen Köpfen klebt.
Kontextbewusst durch RAG
In meiner Bachelorarbeit habe ich das System um eine RAG-Pipeline erweitert. Das Ziel: Die generierten Testfälle kennen den bestehenden Testbestand und die domänenspezifische Terminologie, statt kontextfrei zu bleiben. Dazu habe ich einen eigenen Katalog aus fünf Qualitätskriterien entwickelt und den Nutzen des Retrievals mit Fachleuten aus der Testpraxis evaluiert.
Ergebnis
Das Team nutzt das Tool im Alltag, nicht als Prototyp. Die Zahlen oben stammen aus den betroffenen Abläufen im Testcenter.
Architektur-Interna und die vollständige Evaluation bespreche ich gern persönlich.
