Junior Data Engineer (SQL + Linux)

Junior Data Engineer (SQL + Linux)

O projekcie

Dołączysz do zespołu pracującego nad przetwarzaniem dużych wolumenów danych w organizacji. Twoim zadaniem będzie przygotowanie danych do załadowania do Data Lake (opartego o Hadoop).

Pracujesz blisko developerów rozwijających wewnętrzne narzędzie do ingestu danych (ARC Ingestion Framework).

To rola na pograniczu Data Engineer / Data Ops, gdzie liczy się:

• logiczne myślenie

• rozwiązywanie problemów

• praca z danymi

Twoje zadania

• Zbieranie danych z różnych źródeł

• Czyszczenie i transformacja danych (SQL)

• Walidacja danych przed importem

• Przygotowanie danych do załadowania do Data Lake

• Praca z narzędziem ingestowym opartym o SQL

• Współpraca z zespołem developerskim

Wymagania (must-have)

• SQL - praktyczne doświadczenie (JOIN, GROUP BY, agregacje, czyszczenie danych)

• Linux - praca w terminalu (np. grep, awk, logi, pliki)

• Doświadczenie w pracy z danymi (transformacja, analiza, walidacja)

Mile widziane (nice-to-have)

• Hadoop

• Python

• Doświadczenie z procesami ingestu / ETL

Kogo szukamy?

• Osoby z podejściem analitycznym i „problem-solving mindset"

• Kogoś, kto lubi pracę z danymi i ich jakością

• Kandydatów otwartych na naukę nowych narzędzi

• Osób dobrze odnajdujących się w pracy zespołowej

Co zyskasz?

• Pracę z dużymi zbiorami danych (big data)

• Rozwój w kierunku Data Engineering

• Stabilne, długoterminowe projekty

• Współpracę w międzynarodowym środowisku

• Realny wpływ na jakość danych w organizacji