Data Engineer (Data Integration & Quality)

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych.

Obszary naszej działalności obejmują m.in.:

• doradztwo technologiczne,
• tworzenie oprogramowania,
• systemy wbudowane,
• rozwiązania chmurowe,
• zarządzanie danymi,
• dedykowane zespoły projektowe.

Cześć! Poznaj możliwości współpracy ze Scalo!

Responsibilities

Kompetencje wymagane do realizacji usług:

• minimum 6 lat doświadczenia komercyjnego w pracy z danymi, w tym przy budowie warstw danych, integracji danych lub rozwiązaniach analitycznych,
• bardzo dobra, praktyczna znajomość SQL na poziomie zaawansowanym,
• praktyczna znajomość Python,
• doświadczenie z narzędziami do automatyzacji lub orkiestracji procesów danych, np. Apache Airflow,
• doświadczenie w integracji i mapowaniu danych z wielu źródeł, ich ujednolicaniu oraz definiowaniu reguł transformacji,
• doświadczenie w definiowaniu, weryfikacji i utrzymywaniu reguł jakości danych,
• dobre rozumienie architektury przepływu danych - od systemów źródłowych, przez przetwarzanie i transformację, po warstwy udostępniane odbiorcom,
• doświadczenie w realizacji projektów angażujących wiele zespołów i interesariuszy,
• umiejętność planowania działań, ustalania priorytetów oraz zarządzania zależnościami projektowymi,
• umiejętność strukturyzowania niejednoznacznych potrzeb oraz przekładania ich na konkretne rozwiązania i działania,
• doświadczenie w prowadzeniu uzgodnień technicznych i biznesowych oraz komunikowaniu decyzji, ryzyk i konsekwencji,
• samodzielność i ownership w prowadzeniu powierzonych obszarów od analizy do wdrożenia,
• znajomość języka angielskiego na poziomie minimum B2.

Mile widziane:

• doświadczenie w prowadzeniu lub koordynowaniu projektu, strumienia prac lub złożonej inicjatywy data angażującej wiele zespołów,
• doświadczenie w projektach związanych z przygotowaniem danych na potrzeby modelowania lub zaawansowanej analityki,
• doświadczenie w prowadzeniu warsztatów i uzgodnień pomiędzy zespołami biznesowymi i technicznymi.

Requirements

Zakres współpracy obejmuje:

• udział w projekcie związanym z przygotowaniem danych pod modelowanie oraz budową spójnej i kompletnej historii danych wykorzystywanych w procesach modelowych,
• projektowanie i rozwój warstw danych oraz procesów ich zasilania,
• integracja danych pochodzących z wielu źródeł, ich czyszczenie, ujednolicanie, transformacja i walidacja,
• analiza potrzeb oraz planowanie kolejnych etapów realizacji rozwiązań data engineeringowych,
• prowadzenie uzgodnień z właścicielami danych, odbiorcami biznesowymi oraz zespołami technicznymi,
• organizacja i prowadzenie spotkań oraz warsztatów, przygotowywanie rekomendacji, podsumowań i kolejnych kroków,
• definiowanie mapowań, reguł transformacji oraz reguł jakości danych,
• rozwój procesów przetwarzania danych z wykorzystaniem przede wszystkim SQL, Python i Airflow,
• wsparcie testów, code review, wdrożeń i odbiorów przygotowanych rozwiązań,
• dokumentowanie źródeł danych, mapowań, reguł biznesowych, transformacji oraz decyzji projektowych,
• identyfikacja zależności, ryzyk i problemów oraz inicjowanie działań prowadzących do ich rozwiązania,
• koordynacja przepływu informacji pomiędzy uczestnikami projektu oraz dbanie o jasny podział odpowiedzialności i domykanie ustaleń,
• współpraca z wieloma zespołami w środowisku Agile,
• lokalizacja projektu: Wrocław,
• tryb realizacji usług: zdalnie, z wizytą we Wrocławiu ok. 1 raz na 6 miesięcy,
• budżet projektu: do 150 PLN/h + VAT, w zależności od doświadczenia oraz zakresu świadczonych usług.

Benefits

Co oferujemy w ramach współpracy?

• możliwość świadczenia usług wróżnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services,
• zaangażowanie w dodatkoweinicjatywy presealsowe oraz eksperckie,
• dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.