Data Engineer / Senior Data Engineer (Microsoft Fabric)
📍 Warszawa / praca hybrydowa (min. 1 dzień w tygodniu z biura)
💼 B2B via Antal
💵 130-170 PLN/h netto + VAT (B2B)
📅 Długoterminowy projekt do końca marca 2028
Dla naszego klienta z sektora finansowego poszukujemy osoby na stanowisko Data Engineer / Senior Data Engineer, która dołączy do zespołu odpowiedzialnego za rozwój nowoczesnej platformy danych opartej o technologie Microsoft.
Zakres obowiązków
- Projektowanie i rozwój pipeline'ów danych w Microsoft Fabric Data Factory
- Tworzenie i utrzymanie notebooków PySpark
- Integracja źródeł danych (plikowych i bazodanowych)
- Przygotowywanie oraz transformacja danych wsadowych
- Implementacja mechanizmów walidacji jakości danych i raportowania błędów
- Wersjonowanie danych oraz zarządzanie metadanymi
- Praca z repozytoriami Git oraz procesami CI/CD
- Współpraca z zespołami biznesowymi przy definiowaniu reguł przetwarzania danych
- Dbanie o zgodność rozwiązań z wymaganiami bezpieczeństwa i prywatności danych
- Optymalizacja wydajności i kosztów środowiska danych
Wymagania
- Minimum 3 lata doświadczenia na stanowisku Data Engineer
- Bardzo dobra znajomość Python (PySpark) oraz SQL
- Doświadczenie z Microsoft Fabric, Azure Synapse lub Databricks
- Znajomość architektury warstwowej danych (np. Medallion Architecture)
- Doświadczenie w pracy z formatami Delta oraz Parquet
- Praktyczna znajomość Git i pracy zespołowej w środowisku developerskim
- Doświadczenie w integracji różnorodnych źródeł danych
- Gotowość do podpisania NDA i przejścia procesu weryfikacji bezpieczeństwa
Mile widziane
- Certyfikat DP-600 lub DP-700
- Doświadczenie w sektorze finansowym lub środowisku regulowanym
- Znajomość języka R
- Doświadczenie z CI/CD dla platform danych
- Znajomość narzędzi i frameworków Data Quality
- Praktyka w metodykach Agile/Scrum
Oferujemy
- Długofalową współpracę w strategicznym projekcie realizowanym do marca 2028 roku
- Prywatną opiekę medyczną LuxMed
- Kartę sportową Multisport
- Możliwość pracy z nowoczesnym ekosystemem Microsoft Fabric i Azure
- Współpracę z doświadczonym zespołem specjalistów danych