Mid/Senior Data Engineer Microsoft Fabric [K/M]

O FIRMIE:

Fabrity S.A. to dynamicznie rozwijająca się firma technologiczna, specjalizująca się w inżynierii oprogramowania, generatywnej sztucznej inteligencji oraz przemysłowym Internecie rzeczy (IoT). Tworzymy kompleksowe rozwiązania, które pomagają przedsiębiorstwom automatyzować procesy, zwiększać efektywność operacyjną oraz podejmować kluczowe decyzje dzięki skutecznej analizie danych. Usprawniamy procesy biznesowe, wykorzystując wiodące platformy, takie jak ServiceNow, Microsoft Power Platform oraz nasz autorski produkt low-code, Fastive. Dzięki temu wspieramy organizacje w ich cyfrowej transformacji, minimalizując przestoje i optymalizując operacje na każdym etapie. Pracujemy dla firm z różnych branż, w tym farmaceutycznej, ochrony zdrowia, usług finansowych, produkcji, motoryzacji i handlu detalicznego. Zaufały nam znane marki, między innymi ABB, Bayer, Carrefour, PKO BP, Dormakaba, Sanofi, Toyota Bank, Frontex, Liebherr, Pepsico i Saint-Gobain.

O PROJEKCIE:

Poszukujemy doświadczonej osoby na rolę Product Owner do projektu realizowanego dla jednego z liderów branży ubezpieczeniowej w Polsce. Rola koncentruje się na rozwoju produktów cyfrowych wspierających kluczowe procesy biznesowe oraz budowaniu rozwiązań dostarczających realną wartość użytkownikom i organizacji.

W TEJ ROLI

BĘDZIESZ REALIZOWAĆ PONIŻSZE ZADANIA:

• Projektowanie i rozwój pipeline'ów danych z wykorzystaniem Microsoft Fabric orazAzure Data Factory.

• Tworzenie i rozwój notebooków PySpark odpowiedzialnych za przetwarzanie oraz transformację danych.

• Integracja i onboarding nowych źródeł danych, w tym źródeł plikowych oraz bazodanowych.

• Przygotowywanie i rozwój procesów ETL/ELT oraz wsadowego przetwarzania danych.

• Implementacja mechanizmów walidacji jakości danych oraz raportowania błędów.

• Zarządzanie metadanymi, wersjonowaniem danych oraz śledzeniem przebiegu procesów.

• Praca z repozytoriami Git oraz udział w procesach CI/CD.

• Współpraca z zespołami biznesowymi przy definiowaniu reguł przetwarzania danych.

• Zapewnienie zgodności z wymaganiami bezpieczeństwa oraz regulacjami dotyczącymi ochrony danych.

• Optymalizacja procesów pod kątem wydajności oraz kosztów środowiska chmurowego.

OCZEKIWANIA WZGLĘDEM KANDYDATÓW:

• Minimum 3 lata doświadczenia na stanowisku Data Engineer.

• Bardzo dobra znajomość Python (PySpark) orazSQL.

• Doświadczenie z Microsoft Fabric, Azure Synapse Analytics lubDatabricks.

• Znajomość architektury danych typuMedallion Architecture lub podobnej.

• Doświadczenie w pracy z formatami Delta Lake oraz Parquet.

• Praktyczna znajomość Git.

• Doświadczenie w integracji danych z wielu źródeł.

• Doświadczenie w przetwarzaniu danych pochodzących z plików oraz baz danych.

• Znajomość zasad bezpieczeństwa i ochrony danych.

Mile widziane

• Certyfikat DP-600 lub DP-700.

• Znajomość języka R.

• Doświadczenie w sektorze finansowym.

• Doświadczenie z CI/CD dla platform danych.

• Znajomość narzędzi Data Quality.

• Doświadczenie w Agile/Scrum.

W FABRITY MOŻESZ LICZYĆ NA:

• Benefity w ramach systemu kafeteryjnego,

• Współpracę w oparciu o umowę B2B,

• Możliwość realizacji usług w modelu hybrydowym (1 dni w tygodniu z biura klienta w Warszawie).

• Zaangażowanie w projekt mający realny wpływ na kierunek rozwoju biznesu naszego klienta,