Fahrgastinformation eines großen Verkehrsunternehmens

Release-Tests einer Datenplattform: von GitLab-CI-Jobs zu automatisierten End-to-End-Tests

Branche
Verkehr, Fahrgastinformation
Rolle von Frybad
Lösungsarchitektur der Testorchestrierung, Entwicklung von Testwerkzeugen, Abbau von Altlasten; Teil eines interdisziplinären Testteams
Stack
Kafka, Avro, Spring Boot, Kotlin, Node.js, Argo Workflows, Crossplane, Kubernetes, GitLab CI

Ausgangslage

Die Plattform empfängt Fahrplan- und Echtzeitdaten von vielen Lieferanten, gleicht sie ab und führt sie zu einer Fahrgastinformation zusammen, die über mehrere Kanäle an die Fahrgäste geht. Die Plattform ist ereignisgetrieben, mit Kafka und Avro als Rückgrat; die meisten Teams entwickeln mit Spring Boot.

Ein interdisziplinäres Team testet die Plattform Ende-zu-Ende: Daten rein, Information raus, über alle Teams hinweg. Die Werkzeuge dafür waren gewachsen: Der Node.js-Testrunner war von einem Tester entwickelt worden und hatte keine tragfähige Architektur; Release-Tests liefen als Kette einfacher GitLab-CI-Jobs; und das Unternehmen hatte DevSecOps-Vorgaben, hinter denen das Team zurücklag.

Vorgehen

  • Testrunner refaktoriert. Der Node.js-Testrunner wurde Schritt für Schritt auf eine tragfähige Struktur gebracht, ohne die laufenden Tests zu unterbrechen.
  • Testwerkzeuge als Dienste. Für Testdaten, Prüfungen und Auswertungen entstanden REST-APIs in Spring Boot und Kotlin, so dass Tests sie wie jeden anderen Dienst der Plattform ansprechen.
  • Orchestrierung mit Argo Workflows. Die Release-Tests wurden von einer Kette einfacher CI-Jobs zu Workflows umgebaut: Schritte mit Abhängigkeiten, parallel wo möglich, wiederholbar, mit Artefakten und Auswertung pro Lauf.
  • Release-Umgebungen auf Abruf. Mit Crossplane-CRDs auf Kubernetes werden Release-Umgebungen deklarativ angefordert und wieder abgebaut. Ein Release bekommt seine eigene Umgebung, statt auf eine geteilte Staging-Umgebung zu warten.
  • DevSecOps-Vorgaben. Die Altlasten, die den Vorgaben des Unternehmens im Weg standen, wurden abgebaut und die Werkzeuge an die Vorgaben herangeführt.

Was Crossplane hier leistet: Eine Release-Umgebung wird als Kubernetes-Objekt beschrieben; Crossplane legt die dazu nötigen Ressourcen an und räumt sie beim Löschen des Objekts wieder weg. Die Umgebung ist damit Teil des Testlaufs, nicht ein Ticket an ein anderes Team.

Was sich daraus für Ihr Projekt ergibt

Wenn Ihre Release-Tests an einer geteilten Umgebung oder an handgepflegten CI-Jobs hängen, ist Cloud-native DevOps & SRE der Einstieg. Geht es um die Testwerkzeuge selbst, um APIs, Runner und Architektur, ist es Softwareentwicklung & Architektur.

Ergebnis

Beispiel aus einem laufenden Kundenprojekt.

Release-Tests laufen als automatisierte End-to-End-Workflows statt als Kette einfacher CI-Jobs.

Release-Umgebungen entstehen auf Abruf per Crossplane und verschwinden nach dem Lauf.

Der Testrunner hat eine tragfähige Architektur; Testwerkzeuge sind eigene Dienste.

Nicht enthalten: Zahlen.

Was wir heute anders machen würden

Den Testrunner früher refaktorieren. Ein Werkzeug, das jeder täglich nutzt, wird mit jedem Monat teurer umzubauen. Der Umbau hätte vor dem Ausbau der Orchestrierung stehen sollen, nicht parallel dazu.

Umgebungen von Anfang an als Code. Geteilte Staging-Umgebungen sind der häufigste Grund für wartende Releases. Crossplane-Umgebungen pro Release lösen das; früher eingeführt, hätten sie früher Wartezeit gespart.

DevSecOps-Vorgaben in die Pipeline, nicht in eine Liste. Was eine Pipeline prüft, bleibt erfüllt. Was auf einer Liste steht, veraltet.

Ähnliche Situation?

Schreiben Sie uns, wie ein Release heute getestet wird und wo es wartet. Wir sagen Ihnen, was sich zuerst automatisieren lässt.