GFT_OUT; Data Engineer (Data Fabric) do HSBC

RITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych. Naszym priorytetem jest jakość oraz innowacyjność dostarczanych rozwiązań, a nasza kultura organizacyjna opiera się na zaufaniu, współpracy i ciągłym doskonaleniu.

Kraków | hybrydowo:6-8 dni/miesiąc w biurze

160 PLN/h netto + VAT (B2B), stawka do negocjacji

Osobom spoza Krakowa zwracamy koszty dojazdu do biura.

Poszukujemy Data Engineera, który dołączy do zespołu rozwijającego nowoczesne rozwiązania data engineering. Będziesz projektować i rozwijać skalowalne pipeline’y danych, integrować systemy oraz pracować z rozwiązaniami cloud i data fabric.

Technologie:

Scala · Python · Java · SQL · Apache Airflow · Apache Spark · REST API · Git · CI/CD · GCP · BigQuery · Data Fabric

Responsibilities

• Projektowanie, budowa i utrzymanie data pipelines oraz frameworków.

• Rozwój rozwiązań w Scala, Python i Java.

• Praca z Apache Airflow - DAG-i, scheduling, monitoring i troubleshooting.

• Integracja platform, systemów i REST API.

• Praca z rozwiązaniami cloud oraz udział w rozwoju architektury data fabric.

• Dbanie o jakość, wydajność i niezawodność rozwiązań.

• Stosowanie dobrych praktyk: Git, testing, code review, CI/CD.

• Współpraca z Data Architectami, Software Engineerami, zespołami platformowymi

Requirements

• Doświadczenie w Data Engineering / Software Engineering.

• Bardzo dobra znajomość Scala, Python, Java i SQL.

• Doświadczenie w budowie data pipelines i integracji systemów.

• Praktyczna znajomość Apache Airflow.

• Znajomość REST API.

• Doświadczenie z platformami cloud i cloud-native engineering.

• Znajomość Git, automated testing i CI/CD.

• Umiejętność rozwiązywania złożonych problemów technicznych.

Mile widziane

• GCP, szczególnie BigQuery, Cloud Storage, Pub/Sub, Dataflow lub Dataproc.

• Apache Spark.

• Data fabric, data catalogues, metadata i data lineage.

• Konteneryzacja, orkiestracja lub Infrastructure as Code.

• Doświadczenie w środowisku Agile / DevOps.

• Znajomość zagadnień security i data governance.