Eine Migration von „Temporal“ zu „Cloud-Run“ sollte fünf Testgruppen bestehen: Workflow-Parität und -Wiedergabe, Zustands- und laufende Workflow-Prüfungen, Last- und Skalierungstests, Fehler- und Wiederherstellungsübungen sowie Observabilität und Kostenvalidierung. Das Bestehen aller fünf Testgruppen zeigt, dass sich Ihre Workflows identisch verhalten, Störungen überstehen und zu vertretbaren Kosten ausgeführt werden.
Der Grund für diese Breite liegt darin, dass Cloud Run die Art und Weise verändert, wie Ihre Temporal-Worker ausgeführt werden, nicht jedoch, was Ihre Workflows tun. Die Worker werden zu Container-Instanzen, die sich nach oben und unten skalieren lassen. Daher müssen Sie nachweisen, dass Determinismus, Parallelität und Kosten auch unter diesem neuen Modell gewährleistet sind. In den folgenden Abschnitten werden die einzelnen Testgruppen sowie die damit verbundenen „Go“- oder „No-Go“-Kriterien erläutert.
Welche Tests belegen die Gleichheit der Arbeitsabläufe nach der Migration?
Workflow-Paritätstests belegen, dass dieselben Eingaben in Cloud Run dieselben Ausgaben, denselben Ereignisverlauf und dieselben Nebenwirkungen erzeugen wie auf Ihren aktuellen Workern. Zeitbasierte Workflow-Wiederholungstests sind dabei am aussagekräftigsten, da sie aufgezeichnete Verläufe mit Ihrem neuen Worker-Code erneut ausführen und etwaige Abweichungen kennzeichnen.
Führen Sie diese Überprüfungen durch, bevor Sie Live-Datenverkehr umleiten:
- Wiederholungstests: Exportieren Sie eine repräsentative Auswahl von Workflow-Verläufen aus der Produktionsumgebung und führen Sie diese für den Build aus, den Sie in Cloud Run bereitstellen möchten. Jeder Fehler aufgrund von Nichtdeterminismus bedeutet, dass sich das Verhalten des Codes oder seiner Abhängigkeiten geändert hat.
- Prüfung des Determinismus von Arbeitsabläufen: Überprüfen Sie die Nutzung von Zeit-, Zufalls- und Karteniterationen sowie die im neuen Container-Image enthaltenen Bibliotheks-Upgrades. Eine Änderung des Basis-Images kann das Verhalten beeinflussen, ohne dass auch nur eine einzige Zeile des Workflow-Codes geändert werden muss.
- Tests für Aktivitätsverträge: Stellen Sie sicher, dass jede Aktivität identische Ergebnisse, Fehlertypen und ein identisches Wiederholungsverhalten liefert, wenn sie über Cloud Run ausgeführt wird – einschließlich Netzwerkpfaden, Anmeldedaten und Zeitlimits.
- Parallelfahrten: Führen Sie dieselben Test-Workflows auf alten und neuen Workern in einem Staging-Namespace aus und vergleichen Sie die Ergebnisse.
Berücksichtigen Sie alle Workflow-Typen, alle Signal- und Abfrage-Handler sowie alle Versionszweige, die durch Patching oder Worker-Versionierung erstellt wurden. Verlaufsdaten mit langen Zeitintervallen und untergeordneten Workflows verdienen besondere Aufmerksamkeit, da sie die meisten Codepfade durchlaufen.
Wie testet man Zustands- und Laufzeit-Workflows?
Sie testen den Status und die laufenden Workflows, indem Sie lang laufende Workflows auf den alten Workern starten, die Abfrage der Aufgabenwarteschlange während der Ausführung auf Cloud Run-Worker umstellen und sicherstellen, dass jeder Workflow ab dem letzten Ereignis fortgesetzt wird, ohne dass Daten verloren gehen oder bereits abgeschlossene Aufgaben wiederholt werden. Temporal speichert den Status in seinem Dienst, sodass die Korrektheit von der Wiedergabe abhängt und nicht vom Worker.
Was sollte ein Übergabetest während des Fluges umfassen?
Erstellen Sie Workflows in verschiedenen Zuständen: Warten auf einen Timer, Warten auf ein Signal, Ausführen einer Aktivität und Warten auf einen untergeordneten Workflow. Beenden Sie anschließend die alten Worker und lassen Sie die Cloud Run-Worker die Arbeit übernehmen. Stellen Sie sicher, dass Timer planmäßig ausgelöst werden, Signale nur einmal übermittelt werden und bereits geplante Aktivitäten nicht zweimal ausgeführt werden, es sei denn, Ihre Wiederholungsrichtlinie sieht dies vor.
Wie überprüfen Sie die Datenintegrität und die Versionsverwaltung?
Stellen Sie sicher, dass Payload-Konverter, Verschlüsselungs-Codecs und Suchattribute auf den neuen Workern identisch funktionieren. Ein nicht kompatibler Datenkonverter führt dazu, dass einwandfreie Verlaufsdaten unlesbar werden. Überprüfen Sie außerdem Ihre Versionsstrategie: Workflows, die auf der alten Version gestartet wurden, müssen auf kompatiblem Code weiterlaufen, und die festgelegten Versionen müssen vor der Umstellung in Cloud Run vorhanden sein.
Welche Last- und Skalierungstests sollte Cloud Run bestehen?
Cloud Run-Worker sollten Lasttests bestehen, die Ihrer Spitzenrate beim Start von Workflows, Ihrem Aktivitätsdurchsatz und dem Rückstand in der Aufgabenwarteschlange entsprechen, während die automatische Skalierung die Latenz zwischen Planung und Start innerhalb Ihres Zielwerts hält. Bei den Cloud Run-Lasttests für Temporal liegt der Schwerpunkt darauf, wie schnell Instanzen skalieren, und nicht nur auf dem reinen Anforderungsvolumen.
Beziehen Sie folgende Szenarien in Ihren Plan ein:
- Konstante Spitzenlast: Stellen Sie die höchstmögliche Anzahl an erwarteten Workflow-Starts pro Sekunde sicher und messen Sie die Abschlussraten der Aktivitäten sowie die Latenz der Aufgabenwarteschlange.
- Spitzenlast: Lassen Sie den Datenverkehr sprunghaft ansteigen und beobachten Sie, wie schnell neue Instanzen online gehen und den Rückstand abbauen.
- Auf Null skalieren und Kaltstart: Wenn Sie zulassen, dass inaktive Instanzen herunterskaliert werden, messen Sie die Verzögerung, bis die Abfrage wieder aufgenommen wird. Legen Sie eine Mindestanzahl an Instanzen fest, bei der diese Verzögerung Ihre Latenzziele überschreitet.
- Grenzen für die Parallelität: Passen Sie die Einstellungen für die Worker-Parallelität an die CPU- und Speichergrenzen von Cloud Run an, damit die Instanzen weder unter Ressourcenmangel leiden noch ungenutzt bleiben.
- Langfristige Aktivitäten: Stellen Sie sicher, dass Zeitüberschreitungen bei Anfragen, die Einstellungen zur CPU-Zuweisung und die Heartbeats bei Aktivitäten funktionieren, die Minuten oder Stunden dauern.
Beachten Sie, dass Temporal-Worker nach Aufgaben abfragen, anstatt Anfragen zu empfangen. Konfigurieren Sie Cloud Run so, dass den Instanzen während der Abfrage weiterhin CPU-Leistung zugewiesen bleibt, und stützen Sie die automatische Skalierung auf ein Signal, das den Rückstand in der Aufgabenwarteschlange widerspiegelt, anstatt allein auf den HTTP-Datenverkehr.
Wie sollten Ausfälle und Wiederherstellung getestet werden?
Fehler- und Wiederherstellungstests belegen, dass Workflows korrekt abgeschlossen werden, wenn Instanzen abstürzen, Bereitstellungen durchgeführt werden, Abhängigkeiten fehlschlagen oder die Netzwerkverbindung unterbrochen wird. Fügen Sie diese Fehler gezielt in der Staging-Umgebung ein und stellen Sie sicher, dass zeitgesteuerte Wiederholungsversuche, Timeouts und die Wiedergabe des Verlaufs den Fortschritt ohne Datenverlust oder doppelte Nebenwirkungen wiederherstellen.
Führe zumindest diese Übungen durch:
- Beendigung der Instanz: Beenden Sie die Cloud Run-Instanzen während der Ausführung der Aktivität und stellen Sie sicher, dass die Aktivität auf einer anderen Instanz erneut ausgeführt wird.
- Schrittweise Einführung: Stellen Sie eine neue Revision bereit, während Workflows ausgeführt werden, und stellen Sie sicher, dass alte und neue Revisionen problemlos nebeneinander bestehen können.
- Ausfälle aufgrund von Abhängigkeiten: Blockieren Sie eine Datenbank oder eine nachgelagerte API und überprüfen Sie, ob sich die Wiederholungsrichtlinien, das Backoff-Verhalten und die Behandlung nicht wiederholbarer Fehler wie vorgesehen verhalten.
- Vorübergehender Verlust der Dienstverbindung: Unterbrechen Sie die Verbindung zu Ihrem Temporal-Cluster und vergewissern Sie sich, dass die Worker die Verbindung wiederherstellen und die Abfrage ohne manuelles Eingreifen fortsetzen.
- Prüfung der Idempotenz: Stellen Sie sicher, dass jede Aktivität mit externen Auswirkungen eine mehrmalige Ausführung zulässt.
- Rollback-Probe: Üben Sie die Rückleitung des Datenverkehrs an die alten Worker und stellen Sie sicher, dass die auf Cloud Run gestarteten Workflows weiterhin abgeschlossen werden.
Welche Überprüfungen hinsichtlich Observability und Kosten müssen vor der Umstellung durchgeführt werden?
Vor der Umstellung benötigen Sie Dashboards, Warnmeldungen und Traces, die den Zustand der Workflows auf Cloud Run anzeigen, sowie ein validiertes Kostenmodell für die neue Konfiguration. Die Beobachtbarkeit belegt, dass Sie Probleme schnell erkennen können. Die Kostenvalidierung belegt, dass die Migration die von Ihnen erwarteten finanziellen Ergebnisse liefert und keine unerwarteten Rechnungen nach sich zieht.
Welche Observability sollte vorhanden sein?
Vergewissern Sie sich, dass Sie den Rückstand in der Aufgabenwarteschlange, die Latenz bis zum geplanten Start, die Ausfall- und Wiederholungsraten des Workflows, die Anzahl der Worker-Instanzen sowie die CPU- und Speicherauslastung der Container einsehen können. Überprüfen Sie, ob die Protokolle Workflow- und Ausführungs-IDs enthalten, ob die Traces Aktivitäten mit nachgelagerten Aufrufen verknüpfen und ob die Warnmeldungen das richtige Team benachrichtigen. Testen Sie diese Warnmeldungen, indem Sie sie absichtlich auslösen.
Wie überprüfen Sie die Kosten vor der Inbetriebnahme?
Führen Sie Ihre Lasttests so lange durch, dass Sie anhand der Instanzstunden, der CPU-Auslastung, des Arbeitsspeichers, der Anfragen und des ausgehenden Netzwerkverkehrs die monatlichen Kosten hochrechnen können. Vergleichen Sie diesen Wert mit den aktuellen Infrastrukturkosten und Ihrem Business Case. Stellen Sie sicher, dass Labels oder Tags die Cloud Run-Kosten dem richtigen Team und Workflow zuordnen, und richten Sie Budgetwarnungen ein. Eine solide FinOps-Ansatz zur Überprüfung der Kosten bei der Cloud-Migration vermittelt Ihnen die notwendigen Kenntnisse in den Bereichen Verantwortlichkeiten, Zuweisung und Prognosen, damit Sie diese Ausgaben nach der Markteinführung unter Kontrolle halten können.
Welche Kriterien entscheiden darüber, ob eine Umstellung durchgeführt wird oder nicht?
Starten Sie das Projekt, wenn alle Testgruppen ihre vorab vereinbarten Schwellenwerte erreicht haben, Ihr Rollback-Pfad funktioniert und die Verantwortlichen die Risiken und Kosten genehmigt haben. Erklären Sie das Projekt für nicht durchführbar, wenn ein Replay-Test fehlschlägt, ein laufender Workflow seinen Status verliert oder Latenz und Kosten ihre Zielwerte verfehlen, ohne dass Sie schnell eine Abhilfemaßnahme bereitstellen können.
Verwenden Sie eine schriftliche Checkliste für die Umstellung mit messbaren Meilensteinen:
- 100 Prozent der untersuchten Produktionsverläufe lassen sich ohne Determinismusfehler wiedergeben.
- Laufende Workflows werden über die Übergabe zwischen den Arbeitern im Staging-Bereich hinweg korrekt abgeschlossen.
- Durch Spitzen- und Burst-Lasttests wird die Latenz bis zum Start innerhalb Ihrer Service-Level-Ziele gehalten.
- Jede Fehler-Simulation endet damit, dass die Arbeitsabläufe wiederhergestellt werden und keine doppelten Nebenwirkungen auftreten.
- Die Dashboards und Benachrichtigungen funktionieren, und das Bereitschaftsteam hat das Runbook geübt.
- Die veranschlagten monatlichen Kosten liegen im Rahmen des genehmigten Budgets, wobei die Ausgaben auf die Eigentümer aufgeteilt werden.
- Es gibt einen getesteten Rollback-Plan, für dessen Auslösung eine bestimmte Person benannt wurde.
Ziehen Sie eine schrittweise Umstellung in Betracht: Stellen Sie zunächst eine Aufgabenwarteschlange oder einen kleinen Teil der neuen Workflows um, beobachten Sie die Kennzahlen und erweitern Sie dann den Umfang. Dadurch wird der Umfang der Auswirkungen begrenzt, und Sie erhalten echte Produktionsdaten, bevor Sie sich vollständig festlegen. Wenn die Migration Teil eines umfassenderen Veränderungsprogramms ist, sollten Sie sie auf Ihr strategisches Portfolio-Management stellt sicher, dass die Umstellung an den geschäftlichen Prioritäten und der Finanzierung ausgerichtet bleibt.
So unterstützen wir Sie bei der Migration von Temporal zu Cloud-Run
Wir helfen Ihnen dabei, nachzuweisen, dass die Migration einen geschäftlichen Mehrwert liefert und nicht nur funktionierenden Code. Unsere Teams setzen technische Entscheidungen in Beziehung zu Kosten, Risiken und Ergebnissen, sodass Ihre Entscheidung für oder gegen das Projekt auf Fakten beruht, denen Sie alle vertrauen.
- Kostenmodellierung vor der Umstellung: Wir erstellen Prognosen zu den Cloud Run-Kosten auf der Grundlage Ihrer Lasttestdaten und vergleichen diese mit Ihren aktuellen Betriebskosten.
- Kostenverrechnung und Eigentumsverhältnisse: Wir haben ein System für die Kennzeichnung, Zuordnung und Rechenschaftspflicht eingerichtet, damit jedes Team die Kosten seiner Arbeitsabläufe erkennen und sich dafür verantwortlich fühlen kann.
- Entscheidungsreife Berichterstattung: Wir wandeln technische Testergebnisse in klare Kriterien um, auf die sich die Bereiche Finanzen, IT und Technik einigen können.
- Laufende Optimierung: Wir helfen Ihnen dabei, die Instanzgrößen anzupassen und die Nutzungszusagen nach dem Start zu überprüfen, damit die Einsparungen auch über die Migration hinaus anhalten.
- Abwägungen zwischen Cloud und lokaler Installation: Unsere Kombination aus TBM und FinOps hilft Ihnen dabei, Kosten, Leistung und Risiken der verschiedenen Hosting-Optionen gegeneinander abzuwägen.
Möchten Sie schon vor der Umstellung erfahren, was Ihre Migration kosten und welche Vorteile sie Ihnen bringen wird? Nehmen Sie Kontakt mit uns auf und wir helfen Ihnen bei der Planung.