Architekt Data Platform - Infrastruktura

Cel

Projektowanie, rozwój i nadzór nad architekturą techniczną Platformy Data Lakehouse, obejmującą infrastrukturę, środowiska uruchomieniowe, bezpieczeństwo, monitoring oraz integrację komponentów platformowych.

Zakres odpowiedzialności

• Architektura platformy
• Definiowanie docelowej architektury technicznej Platformy Data Lakehouse.
• Opracowanie roadmapy rozwoju platformy na lata 2027-2029.
• Dobór technologii oraz standardów technicznych.
• Nadzór nad zgodnością wdrażanych rozwiązań z architekturą referencyjną.
• Środowiska i infrastruktura
• Planowanie rozwoju środowisk.
• Nadzór nad migracją i utrzymaniem środowiska produkcyjnego.
• Zarządzanie wymaganiami dotyczącymi zasobów infrastrukturalnych oraz pojemności środowisk.
• Współpraca z zespołami infrastrukturalnymi w zakresie dostępności, wydajności i bezpieczeństwa platformy.
• Monitoring
• Projektowanie architektury monitoringu platformy.
• Definiowanie standardów logowania, metryk, alertów i dashboardów operacyjnych.
• Nadzór nad wdrażaniem narzędzi monitorujących.
• Definiowanie KPI technicznych dla platformy.
• Definiowanie standardów zarządzania użytkownikami, środowiskami i zasobami.
• Projektowanie mechanizmów automatyzacji operacyjnej oraz administracyjnej.
• Nadzór nad implementacją polityk bezpieczeństwa i dostępu.
• Integracja i architektura techniczna procesów
• Projektowanie architektury integracyjnej platformy.
• Zaprojektowanie wykorzystania Apache Kafka w architekturze docelowej.
• Definiowanie wzorców komunikacji między komponentami platformy.
• Bezpieczeństwo i ciągłość działania
• Projektowanie architektury wysokiej dostępności.
• Definiowanie procedur Disaster Recovery i Backup.
• Nadzór nad bezpieczeństwem infrastruktury i konfiguracją komponentów platformowych.
• Współpraca z zespołami bezpieczeństwa i infrastruktury.

Od kandydatów oczekujemy

• Pełnienia roli lidera technicznego rozwiązania
• Nadzór nad wykonywaniem zadań technicznych, code review, wsparcie wdrożenia do zespołu
• Dobór technologii i rozwiązywanie problemów technicznych
• Współpraca z inżynierami infrastruktury w budowie i utrzymaniu infrastruktury dla platformy
• Specyfikowanie komponentów rozwiązania (np. źródła danych, transformacje, repozytoria)
• Zapewnienie mechanizmów monitorowania i testowania platformy
• Znajomość technologii:
• Apache Iceberg, Apache Spark, DBT
• Terraform, Airflow, Docker, Kubernetes
• Narzędzia monitorujące
• CI/CD
• Python
• doświadczenie: min. 10 lat pracy, w tym min. 3 lata na stanowisku architekt
• Min. 5 lat doświadczenia w implementacji rozwiązań BigData, Data Lake lub Data Lakehouse
• wykształcenie: wyższe
• znajomość języka angielskiego na poziomie komunikatywnym
• chęci rozwoju osobistego

Mile widziane

• doświadczenie w branży elektroenergetycznej
• doświadczenie w rozwiązaniach typu Data Lakehouse np. Dremio

Z naszej strony zapewniamy

• Udział w projektach greenfield mających strategiczny wpływ na sektor energetyczny w Polsce i w Europie
• Pracę w przyjaznej atmosferze i wsparcie zespołu nastawionego na dzielenie się wiedzą oraz doświadczeniami