Var med och bygg grunden för SJ:s dataplattform
SJ moderniserar just nu sitt digitala landskap och data är en central del av den resan. Vi bygger en modern dataplattform på Databricks i Azure, inspirerad av data mesh-principer, där team enkelt ska kunna publicera, upptäcka och använda data som dataprodukter.
Vårt team, Foundry, arbetar i gränslandet mellan plattform och verkliga dataprojekt. Vi utvecklar själva plattformskapabiliteterna - katalog, governance, pipelines och utvecklarverktyg - samtidigt som vi arbetar praktiskt med riktiga datakällor och affärsbehov.
Det gör att vi kan testa idéer snabbt, hitta rätt tekniska mönster och bygga en plattform som möter behoven. Nu söker vi en Senior Data Engineer som vill vara med och forma den här grunden tillsammans med oss.
Vad du kommer arbeta med
Rollen kombinerar plattformstänk med praktisk data engineering. Till exempel kommer du att:
Bygga datapipelines och dataprodukter
Utveckla pipelines och transformationer i Databricks och dbt
Modellera data och leverera dataprodukter som kan användas av andra team.
Definiera och utveckla “golden paths” för data engineering
Ta fram standardiserade sätt att bygga och publicera dataprodukter
Mallar, SDK:er, verktyg och dokumentation som gör plattformen enkel att använda.
Utveckla lösningar för dataklassificering, anonymisering, åtkomstkontroller och andra krav kopplade till exempelvis GDPR.
Samarbeta med utvecklare, analytiker och plattformsteam för att säkerställa att plattformen och dataprodukterna löser verkliga problem och kan användas brett i organisationen.
Vi tror att du
Har mångårig erfarenhet som Data Engineer eller Software Engineer
Har arbetat praktiskt med Databricks (Delta Lake, Unity Catalog, pipelines)
Har god erfarenhet av Python och SQL
Har arbetat i molnmiljö, exempelvis Azure
Har erfarenhet av dbt eller liknande transformationsverktyg
Är bekväm med Git-baserade arbetsflöden
Har arbetat med Infrastructure as Code, t.ex. Terraform
T