Kafka Engineer (K/M/X)

B2Bnetwork Show all offers

Wrocław

1 month ago

In short

Kafka Engineer needed for hybrid Apache Kafka platform development (on-premise & AWS). Responsibilities: architecture, data replication, automation, security, monitoring. Requires 4+ years of Kafka experience & AWS knowledge.

Keywords

Apache Kafka Confluent Platform AWS Terraform CI/CD Python Bash Prometheus Grafana Scrum

AI-written summary based on the listing content.

Poszukujemy osoby na stanowisko Kafka Engineer, która dołączy do projektu związanego z budową i rozwojem hybrydowej platformy Apache Kafka łączącej środowisko on-premise z AWS. Rola ma charakter infrastrukturalno-platformowy i obejmuje m.in. architekturę, replikację danych, automatyzację, bezpieczeństwo oraz monitoring środowiska Kafka.

Zakres obowiązków

Projektowanie i rozwój hybrydowego środowiska Kafka on-premise – AWS.

Konfiguracja i utrzymanie komponentów Confluent Platform.

Budowa i konfiguracja klastrów Kafka w AWS.

Konfiguracja replikacji pomiędzy klastrami z wykorzystaniem MirrorMaker 2, Cluster Linking lub Confluent Replicator.

Zapewnienie spójności danych oraz odpowiednich opóźnień pomiędzy środowiskami.

Tworzenie i rozwój pipeline’ów CI/CD.

Automatyzacja infrastruktury z wykorzystaniem Terraform.

Konfiguracja monitoringu i observability.

Tworzenie runbooków, alertów oraz SLA/SLO.

Troubleshooting, obsługa incydentów i performance tuning.

Współpraca z zespołami technicznymi oraz dzielenie się wiedzą.

Wymagania

Minimum 4 lata komercyjnego doświadczenia z Apache Kafka.

Bardzo dobra znajomość Confluent Platform Enterprise oraz Confluent Cloud.

Praktyczne doświadczenie w migracji lub replikacji klastrów Kafka z wykorzystaniem MirrorMaker 2, Cluster Linking lub Confluent Replicator.

Praktyczna znajomość AWS, w szczególności VPC, IAM, EC2, EKS, MSK, S3, KMS i Secrets Manager.

Doświadczenie w budowie lub utrzymaniu środowisk hybrydowych on-premise – AWS.

Bardzo dobra znajomość Terraform i Infrastructure-as-Code.

Doświadczenie z narzędziami CI/CD, np. GitHub Actions, GitLab CI lub Jenkins.

Znajomość Python i Bash.

Doświadczenie z Prometheus, Grafana i Confluent Control Center oraz znajomość Open

Telemetry lub Elastic Stack.

Znajomość zagadnień bezpieczeństwa Kafka: TLS, SASL, ACL, RBAC oraz szyfrowanie danych.

Doświadczenie w pracy w Scrum/Kanban oraz z Jira i Confluence.

Mile widziane: Ansible, Terratest, tfsec, automatyzacja testów integracyjnych oraz doświadczenie w mentoringu lub prowadzeniu warsztatów technicznych.