Data Engineer

Nasz Klient to międzynarodowa organizacja z sektora finansowego realizująca projekty związane z analizą danych, modelowaniem ryzyka oraz rozwojem nowoczesnych platform przetwarzania informacji.

Projekt koncentruje się na rozwoju rozwiązań Big Data wspierających zaawansowane procesy analityczne oraz inicjatywy regulacyjne. Zakres współpracy obejmuje budowę i rozwój platform danych, optymalizację procesów przetwarzania oraz dostarczanie rozwiązań wspierających podejmowanie decyzji biznesowych.

Do współpracy zapraszamy osoby posiadające doświadczenie w obszarze Data Engineering, które chcą rozwijać skalowalne rozwiązania oparte o nowoczesny ekosystem danych i technologie chmurowe.

Tryb Współpracy: Warszawa - model hybrydowy (2-3 dni w tygodniu z biura)

Dostępność: Poszukujemy osób dostępnych od zaraz lub z maksymalnie 1-miesięcznym okresem wypowiedzenia.

CZYM BĘDZIESZ SIĘ ZAJMOWAĆ?

• Projektowaniem, rozwijaniem oraz utrzymywaniem procesów przetwarzania danych z wykorzystaniem Python oraz PySpark

• Tworzeniem i optymalizacją rozwiązań działających w środowiskach Azure Databricks, Hadoop oraz rozproszonych platformach danych

• Wspieraniem inicjatyw związanych z analizą danych, modelowaniem ryzyka oraz rozwojem zaawansowanych procesów obliczeniowych

• Współpracą z zespołami biznesowymi, analitycznymi oraz technologicznymi przy dostarczaniu rozwiązań opartych o dane

• Dbałością o jakość danych, wydajność procesów oraz niezawodność rozwijanych rozwiązań

• Wykorzystywaniem dobrych praktyk związanych z bezpieczeństwem, zarządzaniem danymi oraz rozwojem oprogramowania

CZEGO OD CIEBIE OCZEKUJEMY?

Must have:

• Minimum 3 lata doświadczenia komercyjnego na stanowisku Data Engineer w sektorze bankowym lub finansowym

• Bardzo dobra znajomość Python

• Praktyczne doświadczenie z PySpark

• Doświadczenie w pracy z Azure Databricks

• Znajomość środowiska Hadoop, w tym HDFS oraz Hive

• Doświadczenie w przetwarzaniu dużych wolumenów danych

• Bardzo dobra znajomość SQL

• Umiejętność analizy i pracy z istniejącymi rozwiązaniami opartymi o Java

• Znajomość narzędzi takich jak Git, GitHub, Jenkins, Jira oraz Confluence

• Znajomość języka angielskiego na poziomie minimum C1

Nice to have:

• Doświadczenie z narzędziami do orkiestracji procesów, takimi jak Airflow, Oozie lub Control-M

• Znajomość platform chmurowych AWS, Azure lub GCP

• Doświadczenie z rozwiązaniami streamingowymi, takimi jak Kafka

• Znajomość ServiceNow

• Doświadczenie z Starburst

DLACZEGO WARTO?

• Projekt realizowany w obszarze danych, analityki i zaawansowanych rozwiązań finansowych

• Możliwość realnego wpływu na rozwój architektury danych oraz wykorzystywanych rozwiązań technologicznych

• Współpraca w międzynarodowym środowisku z ekspertami z obszaru danych, analityki i technologii

• Nowoczesny stack technologiczny obejmujący Python, PySpark, Azure Databricks, Hadoop oraz rozwiązania Big Data

• Możliwość uczestniczenia w projekcie w obszarze architektury danych, rozwiązań chmurowych i skalowalnego przetwarzania danych

Dziękujemy za wszystkie zgłoszenia! Skontaktujemy się z wybranymi osobami.

TQLO Sp. z o.o. - Agencja Zatrudnienia (nr KRAZ 33580)