KI-Agenten können Bugs analysieren, Tests generieren und Entscheidungen treffen, das Ganze im Stunden- oder gar Minutentakt. Klingt nach Hypervelocity. Dumm nur, wenn der nächste Freigabeprozess 14 Tage dauert. Agentic QA verändert nicht nur das Testing, sondern stellt die Organisation auf den Prüfstand. Denn die entscheidende Frage ist nicht mehr, ob Agenten testen können, sondern ob die Organisa..
Mit dem Aufkommen von Agentic QA stellt sich die Frage, wie viel Autonomie eine Testsuite verträgt. Nach einigen Monaten Praxis zeigte sich: Der Mensch bleibt verantwortlich. Mit zunehmender Autonomie verschiebt sich seine Aufgabe jedoch: weg von der Prüfung jedes einzelnen Outputs, hin zur Gestaltung der Kontrollmechanismen. Verantwortung wird also auf eine andere Ebene verlagert. Genau dort ents..
Bei vielen KI-Komponenten reicht der Vergleich mit einem einzelnen erwarteten Wert nicht mehr als alleiniger Qualitätsnachweis aus. Betroffen ist jedes Team, das solche Systeme freigibt. Die Probleme stehen seit 2019 im Testwissen, messbar wurden sie erst mit den heutigen Normen. Ein Modell aus sechs Prüfarten ordnet, welches Kriterium wo greift. Sobald ein System handelt statt antwortet, kommt ei..
Anwendungssoftware
Ein Experiment mit QA-Agenten, unlösbaren Bugreports und einer unbequemen Erkenntnis: Struktur legitimiert Falschheit
QA-Agenten liefern Testfälle auch dann, wenn der Bugreport inhaltlich widersprüchlich oder frei erfunden ist. Das gefährdet gerade sorgfältige Teams: Was sauber aussieht, wird irgendwann nicht mehr hinterfragt. Ein Experiment mit 400 Läufen zeigt: Fehlendes wird zu 100 Prozent erkannt, Falsches zu 0 Prozent. Der Agent erkennt also, was fehlt – aber nicht, was falsch ist. Fünf Maßnahmen schließen g..
Generative KI hat inzwischen auch den Softwaretest erreicht. Testfälle generieren, Anforderungen analysieren oder Testdaten erzeugen lassen, sind mit wenigen Prompts erledigt. Doch ein guter Prompt allein macht noch keinen zuverlässigen Engineering-Prozess. Bei der Raiffeisen Bank International AG (RBI) gehen wir deshalb einen Schritt weiter: Statt isolierter KI-Assistenten bauen wir einen integri..
