Senior Data Engineer

Dla naszego klienta, międzynarodowej organizacji z sektora mediów i broadcastingu, poszukujemy Senior Data Engineera do długoterminowego projektu realizowanego w modelu zastępstwa za kluczowego członka zespołu po stronie klienta.

Szukamy osoby bardzo samodzielnej, technicznie dojrzałej i gotowej szybko wejść w istniejące środowisko projektowe. Projekt dotyczy rozwoju i utrzymania rozwiązań związanych z przetwarzaniem dużych wolumenów danych, integracją danych oraz zapewnieniem ich jakości w środowisku chmurowym.

Zakres obowiązków

Na tym stanowisku będziesz odpowiadać za:

• projektowanie, rozwój i utrzymanie rozwiązań data engineering w środowiskach cloud,

• budowę, optymalizację i utrzymanie pipeline'ów danych ETL/ELT,

• przetwarzanie dużych wolumenów danych z naciskiem na Data Quality,

• implementację rozwiązań z wykorzystaniem PySpark oraz SQL,

• tworzenie i utrzymanie testów jednostkowych oraz integracyjnych,

• automatyzację procesów CI/CD,

• współpracę z zespołami technicznymi i biznesowymi po stronie klienta,

• przejęcie obowiązków kluczowego członka zespołu klienta.

Wymagania

Szukamy osoby, która posiada:

• senioralne doświadczenie w obszarze Data Engineering,

• doświadczenie w pracy z architekturami cloud,

• bardzo dobrą znajomość PySpark oraz SQL,

• doświadczenie w pracy z dużymi zbiorami danych i przetwarzaniem danych w skali,

• praktyczne doświadczenie z Data Quality,

• doświadczenie w tworzeniu testów jednostkowych i integracyjnych dla pipeline'ów danych,

• doświadczenie w automatyzacji procesów CI/CD,

• bardzo dobrą znajomość języka angielskiego, minimum B2+, umożliwiającą codzienną komunikację projektową.

Technologie i narzędzia

W projekcie wykorzystywane są między innymi:

• AWS CDK,

• AWS Lambda,

• Databricks,

• Google Cloud Platform,

• Google App Engine,

• BigQuery,

• Dataproc,

• Airflow,

• Terraform,

• GitHub Actions,

• Jenkins.

Oferujemy:

• Stawka do 170 zł/h netto na b2b

• Przelew w dogodnej formie

• Długoterminowy kontrakt

• Krótki 14-dniowy termin płatności faktury

• Bogaty pakiet usług prywatnej opieki medycznej

• Dostęp do platformy kafeteryjnej MyBenefit (umożliwiającej zamawianie kart Multisport, kart przedpłaconych do Ikea, Zalando, Notino i wielu innych)