Kontaktperson: Camilla Liin
Email: CL@scr.dk
Telefon nr.: 41183948
Område: Region Hovedstaden
Type: Freelance opgave
Arbejdsområde: Forretningssystemer
Freelance Databricks Ingestion Lead, KBH
SCR søger på vegne af vores kunde en erfaren Freelance Databricks Ingestion Lead til et projekt i København.
Kunden er i gang med at etablere en Databricks-platform og søger en seniorprofil, der kan tage det tekniske ansvar for ingestion af data fra forskellige kildesystemer, med Oracle som det første.
Du får en central rolle i at designe og implementere et robust, skalerbart og metadata-drevet ingestion framework, der sikrer pålidelig overførsel af data til platformens bronze layer.
Opgaven omfatter både hands-on udvikling, tekniske beslutninger og ledelse af et mindre team af Data Engineers. Derudover skal du sikre, at løsningen er veldokumenteret og kan overtages af kundens interne team.
Faglige kompetencer
• Solid erfaring med Databricks og udvikling af skalerbare data ingestion-løsninger.
• Erfaring med ingestion fra Oracle og andre relationelle databaser.
• Erfaring med Lakeflow Connect, Auto Loader og/eller Azure Data Factory (ADF).
• Erfaring med design og udvikling af metadata-drevne ingestion frameworks.
• Praktisk erfaring med Change Data Capture (CDC) og incremental data loads.
• Erfaring med håndtering af schema evolution, deletes og late-arriving data.
• Forståelse for idempotency, checkpoints, watermarks og reprocessing.
• Erfaring med monitorering, alerting, data quality og etablering af SLA’er for dataloads.
• Erfaring med cut-over, datavalidering og reconciliation ved migrering af datakilder.
• Erfaring med teknisk ledelse og sparring med Data Engineers.
Personlige kompetencer
• Du arbejder struktureret og har fokus på kvalitet og stabile løsninger.
• Du er selvstændig og tager ansvar for både tekniske beslutninger og fremdrift.
• Du trives i en hands-on rolle, hvor du både udvikler løsninger og fungerer som teknisk sparringspartner.
• Du har erfaring med at guide og understøtte andre udviklere.
• Du har fokus på dokumentation og vidensoverdragelse.
Information om projektet
Projektstart: 1. december 2026
Varighed: 4 måneder med mulighed for forlængelse
Arbejdssted: København
Omfang: Fuldtid