Zum Inhalt springen
EngineerPlattform
Menü
Design
Deutsch

Engineer / Plattform / Portfolio

Langsame Aufgaben in River‑Jobqueue verlagert

Langsame Verarbeitung aus dem Anfragepfad in eine River‑Jobqueue verlagert — 15 Worker‑Module, 8 geplante Aufgaben und 20 pg_cron‑Jobs — sodass Anfragen zurückkehren, während die zugehörige Arbeit weiterläuft.

Situation. Manche Aufgaben gehören nicht in die Wartezeit eines Nutzers: E‑Mail senden, Suchindex erneuern, Dokumente erzeugen, Ranglisten berechnen. Im Anfragepfad ausgeführt, lassen sie Nutzer auf ungewollte Hintergrundarbeit warten. Eine Goroutine löst das ebenfalls nicht: Beim nächsten Prozessneustart mitten in der Bereitstellung verschwindet sie, ohne eine Spur der vorgesehenen Arbeit.

Aufgabe. Hintergrundarbeit brauchte einen dauerhaften Ort: eine Queue, die Neustarts übersteht, fehlgeschlagene Aufgaben erneut anstößt und bei ausbleibender Verarbeitung überprüfbar ist.

Massnahmen. Die Wahl fiel auf River, vor allem wegen der Speicherung in PostgreSQL. Die Datenbank ist bereits maßgebliche Datenquelle; ein Job und die betroffenen Zeilen können gemeinsam committen oder zurückrollen. Eine zweite zu betreibende Infrastruktur entfällt. Dahinter stehen 15 Worker‑Module und 8 geplante Aufgaben. Darunter erledigen 20 pg_cron‑Jobs Wartung, die die Datenbank besser selbst ausführt: Partitionen bereinigen, Salts wechseln, Aggregate aktualisieren. Spürbar langsame Arbeit wurde aus dem Anfragepfad auf einen dieser beiden Wege verlagert.

Ergebnis. Anfragen kehren schnell zurück, und die langsame Arbeit wird trotzdem abgeschlossen — mit Wiederholungen und sichtbarer Historie bei Problemen. PostgreSQL statt eines eigenen Brokers ist eine bewusste Grenze. Die Lösung skaliert nicht unbegrenzt und wird ab einem gewissen Volumen unpassend. Bei einer ohnehin datenbankbegrenzten Plattform war ein bewegliches Teil weniger wertvoller als ungenutzte zusätzliche Kapazität.

Kontakt

Sie klären noch, was Sie benötigen?

Erzählen Sie uns, was nicht funktioniert oder was Sie entwickeln möchten. Wir sagen Ihnen, was dafür nötig wäre, was es ungefähr kosten würde und ob wir die Richtigen dafür sind.

Ab 1.400 DKK pro Stunde, zuzüglich Mehrwertsteuer — und weniger pro Stunde bei längerer Buchung.

welcome@engineer.company +45 50 10 61 84 Kopenhagen, Dänemark