Automatiserte leveransen av 20 GIS‑datapipelines
Automatiserte leveransen av 20 GIS‑datapipelines og ETL‑prosesser
for applikasjonsdata, og effektiviserte infrastrukturautomatisering
og rapportering.
2022 – 2024

Situasjon. Plattformen kjørte på mange GIS‑datapipelines og
ETL‑prosesser for applikasjonsdata, og de ble levert og fulgt opp
manuelt. Manuelt kjørte pipelines skaper flaskehalser, de mister
konsistensen over tid, og verst av alt bærer de med seg en konstant,
lav risiko for at én av dem feiler i det stille uten at noen merker
det før dataene allerede er feil lenger ned i kjeden.

Oppgave. Oppgaven var å automatisere leveransen av disse pipelinene
og ETL‑prosessene — slik at dataene fløt pålitelig og forutsigbart
uten at noen måtte gjete dem.

Handling. Tjue GIS‑datapipelines og ETL‑en for applikasjonsdata ble
lagt under automatisert leveranse, fra ende til ende. Planleggingen,
loggingen og feilhåndteringen ble standardisert, slik at alle
pipelines oppførte seg likt og, ikke minst, slik at du kunne se når
én ikke gjorde det — en stille feil er bare stille hvis ingenting
følger med. Og de ble innlemmet i den eksisterende
infrastrukturautomatiseringen og rapporteringen, slik at de ble en
del av ett sammenhengende system i stedet for en skuff full av
skript som noen måtte huske å kjøre.

Resultat. Alle tjue pipelinene og ETL‑prosessene deres kjørte
automatisk og forutsigbart, og hele bildet av
infrastrukturautomatisering og rapportering ble ryddigere som følge
av det. Virksomheten fikk pålitelige, oppdaterte data uten at noen
måtte lose dem gjennom manuelt — og uten at risikoen for stille feil
hang over den.

Kategorier:
1Data engineering	/nb/categories/data-engineering/	platform.engineer.company	70
1Datapipelines (ETL/ELT)	/nb/categories/data-pipelines/	platform.engineer.company	70
1DevOps	/nb/categories/devops/	platform.engineer.company	70
1Automatisering og CI/CD	/nb/categories/automation/	platform.engineer.company	70
1Pålitelighet og sikkerhetskopier	/nb/categories/reliability/	platform.engineer.company	70
1Overvåking og observerbarhet	/nb/categories/observability/	platform.engineer.company	70
1GIS / geodata	/nb/categories/gis/	platform.engineer.company	70

Tjenester:
1GIS- og geodataløsninger	/nb/services/gis-geospatial/	platform.engineer.company	70
1Utvikling av datapipelines (ETL/ELT)	/nb/services/data-pipeline-development/	platform.engineer.company	70
1DevOps og CI/CD‑automatisering	/nb/services/devops-cicd/	platform.engineer.company	70

hDenne siden på nettet	URL:https://platform.engineer.company/nb/portfolio/automated-delivery-of-20-gis-data-pipelines/	platform.engineer.company	70
