Kafka Engineer
Clurgo to firma stworzona przez developerów dla developerów. Nasze zespoły łączą pełne spektrum kompetencji - od rozwoju oprogramowania i infrastruktury, przez analizę oraz testy, aż po strategiczne zarządzanie produktem i procesami. Realizujemy różnorodne projekty IT dla klientów z wielu branż, dbając o dobre praktyki programistyczne i zachowanie work-life balance. Tworzymy rozwiązania, które mają znaczenie - dla firm w Polsce i na całym świecie.
Dołącz do projektu dla klienta z branży bankowej, w którym będziesz uczestniczyć w budowie i rozwoju zaawansowanego, hybrydowego środowiska Kafka łączącego klastry on-premise i AWS. Projekt koncentruje się na tworzeniu nowoczesnych rozwiązań chmurowych z wykorzystaniem bogatego ekosystemu narzędzi Confluent oraz automatyzacji wdrożeń w architekturze AWS.
Technologie i narzędzia: Apache Kafka, Confluent Platform, Confluent Cloud, AWS, Terraform, Ansible, Python, Bash
Model hybrydowy: Wrocław (1 dzień w biurze / 4 dni zdalnie)
Szukamy Ciebie, jeśli:
Masz minimum 4 lata praktycznego doświadczenia z Apache Kafka
Posiadasz biegłą znajomość Confluent Platform (Enterprise) oraz Confluent Cloud
Masz praktyczne doświadczenie w migracji i replikacji klastrów przy użyciu MirrorMaker 2, Cluster Linking oraz Confluent Replicator
Znasz i sprawnie poruszasz się w środowisku AWS oraz jego usługach: VPC, IAM, EC2, EKS, MSK, S3, KMS, Secrets
Masz doświadczenie w budowie i utrzymaniu środowisk hybrydowych (on-premise ↔ AWS)
Tworzysz infrastrukturę jako kod przy użyciu Terraform (pisanie modułów, testy) oraz automatyzujesz zadania za pomocą języka Python, Basha lub Ansible
Konfigurujesz pipeline'y CI/CD w GitHub Actions, GitLab CI lub Jenkinsie
Posługujesz się językiem angielskim na poziomie minimum B2
Znasz narzędzia monitoringu: Prometheus, Grafana, Confluent Control Center, OpenTelemetry, Elastic Stack
Rozumiesz zagadnienia bezpieczeństwa: TLS, SASL, ACL, RBAC oraz szyfrowanie danych
Mile widziane:
Doświadczenie w automatyzacji testów integracyjnych dedykowanych dla Kafki
Znajomość nowoczesnych komponentów przetwarzania danych strumieniowych, takich jak Flink oraz Tableflow
Doświadczenie w pracy w zespole projektowym klasy Enterprise w metodyce Agile (Scrum/Kanban)
Zadania:
Projektowanie hybrydowej topologii Kafki łączącej infrastrukturę on-premise z AWS
Dobór, konfiguracja oraz strojenie (tuning) komponentów Confluent Platform (Schema Registry, Flink, Control Center, Tableflow)
Tworzenie i zarządzanie klastrami Kafka (MSK, Confluent Cloud) oraz powiązanymi zasobami
Implementacja monitoringu i systemów alertowania (Prometheus, Grafana, OpenTelemetry) oraz definiowanie SLA/SLO i runbooków
Konfiguracja i optymalizacja mechanizmów replikacji: MirrorMaker 2, Cluster Linking oraz Replicator
Wdrażanie infrastruktury jako kod przy użyciu Terraform (wersjonowanie, testowanie planów, automatyzacja wdrożeń)
Definiowanie pipeline'ów wdrożeniowych (GitHub Actions, GitLab CI, Jenkins) dla klastrów, schematów danych oraz aplikacji
Zapewnianie spójności danych oraz dbanie o niskie opóźnienia w ich transferze pomiędzy środowiskami
Czego możesz się spodziewać:
współpracy w oparciu o kontrakt B2B
pracy hybrydowej 1 dzień w tygodniu w biurze klienta we Wrocławiu
benefitów: opieka medyczna, karta multisport, lekcje języka angielskiego
integracji - lubimy spędzać razem czas
profesjonalnego procesu rekrutacyjnego - zawsze otrzymasz od nas feedback niezależnie od decyzji
Poznaj nas lepiej https://www.facebook.com/clurgo/