Data Platform Developer

Szukamy Data Platform Developera do budowy i rozwoju platformy event-driven opartej o Apache Kafka.

O projekcie

Zespół Data Platform odpowiada za projektowanie, budowę i utrzymanie nowoczesnej platformy event-driven, w której centralnym elementem jest Apache Kafka wraz z Kafka Connect, Kafka Streams oraz kSQL. Rozwiązanie wykorzystuje również Spring Boot, Quarkus/GraalVM, MongoDB, GraphQL oraz Apache Iceberg. Projekt obejmuje rozwój backendu, integrację danych, automatyzację oraz monitoring rozwiązań działających na produkcji.

Twój zakres obowiązków

• Projektowanie i rozwijanie rozwiązań event-driven
• Rozwój rozwiązań opartych o Apache Kafka, Kafka Connect, Kafka Streams i kSQL
• Definiowanie i wersjonowanie schematów danych
• Rozwój mikroserwisów w Spring Boot
• Implementacja producerów, consumerów i stream processingu
• Budowa API GraphQL udostępniającego dane z MongoDB
• Konfiguracja i rozwój konektorów Kafka Connect, w tym transformacji SMT oraz konwerterów
• Automatyzacja konfiguracji topików, konektorów i streamów
• Monitoring, observability, diagnostyka oraz optymalizacja działania Kafki
• Dokumentowanie rozwiązań i dzielenie się wiedzą w zespole

Wymagania

• Doświadczenie w projektowaniu i rozwijaniu rozwiązań opartych o Apache Kafka, Kafka Streams, kSQL oraz Kafka Connect
• Doświadczenie w programowaniu w Javie
• Doświadczenie w budowie mikroserwisów z wykorzystaniem Spring Boot, Spring Cloud, Spring Security i Spring Data
• Doświadczenie w pracy z bazą danych MongoDB

Mile widziane

• Znajomość Quarkus i GraalVM
• Doświadczenie z formatami Avro, Protobuf, JSON Schema
• Znajomość Kafka SMT oraz Kafka converters
• Doświadczenie z narzędziami ELK, Vector, Dynatrace
• Znajomość praktyk DevOps oraz CI/CD
• Doświadczenie w środowiskach chmurowych i on-premise
• Znajomość GraphQL
• Znajomość Apache Iceberg
• Znajomość Pythona
• Doświadczenie z Prometheus, Grafana oraz OpenTelemetry

B2B Network łączy specjalistów IT z projektami, które do nich pasują. To Ty wybierasz projekt, my zapewniamy stabilne warunki i wsparcie.