Inżynier / Inżynierka Danych (Azure / Microsoft Fabric)

Opis firmy

17000 - 21000

Stanowisko

Inżynier / Inżynierka Danych (Azure / Microsoft Fabric)

Opis stanowiska

• Projektowanie, budowa i utrzymanie pipeline’ów danych z systemów (SAP, MES, systemy zewnętrzne) do warstwy analitycznej

• Implementacja procesów ingestion oraz transformacji danych (bronze/silver) z wykorzystaniem PySpark, Spark SQL i Python

• Administracja i rozwój środowiska Microsoft Fabric / Azure (workspace’y, zasoby, bezpieczeństwo, monitoring kosztów)

• Monitoring pipeline’ów, obsługa alertów i reagowanie na incydenty

• Współpraca z analitykami przy budowie modeli danych (warstwa gold)

• Zapewnienie jakości danych oraz optymalizacja wydajności procesów przetwarzania

Wymagania

• Kilkuletnie doświadczenie w inżynierii danych

• Wykształcenie wyższe kierunkowe

• Doświadczenie w pracy na podobnym stanowisku

• Bardzo dobra znajomość Azure (Storage, Key Vault, Networking, IAM)

• Bardzo dobra znajomość Microsoft Fabric / Synapse / Databricks

• Bardzo dobra znajomość Spark (PySpark, Spark SQL) oraz Python

• SQL na poziomie średnio-zaawansowanym

• Doświadczenie z Git/GitHub oraz CI/CD

• Znajomość narzędzi i podejść Data Quality

• Umiejętność optymalizacji pipeline’ów oraz pracy w środowisku greenfield

• Samodzielność, odpowiedzialność, proaktywność oraz nastawienie na rozwój