Data Platform Developer (k/m/x)

Szukamy Data Platform Developera do budowy i rozwoju platformy event-driven opartej o Apache Kafka.

O projekcie

Zespół Data Platform odpowiada za projektowanie, budowę i utrzymanie nowoczesnej platformy event-driven, w której centralnym elementem jest Apache Kafka wraz z Kafka Connect, Kafka Streams oraz kSQL. Rozwiązanie wykorzystuje również Spring Boot, Quarkus/GraalVM, MongoDB, GraphQL oraz Apache Iceberg. Projekt obejmuje rozwój backendu, integrację danych, automatyzację oraz monitoring rozwiązań działających na produkcji.

Twój zakres obowiązków

• Projektowanie i rozwijanie rozwiązań event-driven

• Rozwój rozwiązań opartych o Apache Kafka, Kafka Connect, Kafka Streams i kSQL

• Definiowanie i wersjonowanie schematów danych

• Rozwój mikroserwisów w Spring Boot

• Implementacja producerów, consumerów i stream processingu

• Budowa API GraphQL udostępniającego dane z MongoDB

• Konfiguracja i rozwój konektorów Kafka Connect, w tym transformacji SMT oraz konwerterów

• Automatyzacja konfiguracji topików, konektorów i streamów

• Monitoring, observability, diagnostyka oraz optymalizacja działania Kafki

• Dokumentowanie rozwiązań i dzielenie się wiedzą w zespole

Wymagania

• Doświadczenie w projektowaniu i rozwijaniu rozwiązań opartych o Apache Kafka, Kafka Streams, kSQL oraz Kafka Connect

• Doświadczenie w programowaniu w Javie

• Doświadczenie w budowie mikroserwisów z wykorzystaniem Spring Boot, Spring Cloud, Spring Security i Spring Data

• Doświadczenie w pracy z bazą danych MongoDB

Mile widziane

• Znajomość Quarkus i GraalVM

• Doświadczenie z formatami Avro, Protobuf, JSON Schema

• Znajomość Kafka SMT oraz Kafka converters

• Doświadczenie z narzędziami ELK, Vector, Dynatrace

• Znajomość praktyk DevOps oraz CI/CD

• Doświadczenie w środowiskach chmurowych i on-premise

• Znajomość GraphQL

• Znajomość Apache Iceberg

• Znajomość Pythona

• Doświadczenie z Prometheus, Grafana oraz OpenTelemetry

B2B Network łączy specjalistów IT z projektami, które do nich pasują. To Ty wybierasz projekt, my zapewniamy stabilne warunki i wsparcie.

Tech stack

• Apache Kafka
• Kafka Streams
• kSQL
• Kafka Connect
• Java
• Spring Boot
• Spring Cloud
• Spring Security
• Spring Data
• MongoDB