Azure Databricks Architect

ITELENCE to szybko rozwijająca się firma wspierająca swoich międzynarodowych klientów w ich biznesowej i cyfrowej transformacji. Rozumiemy, że ludzie są naszym największym kapitałem, a kultura wzajemnego wsparcia, motywacji i rozwoju jest kluczem do wspólnego sukcesu. Naszą ambicją jest zbudowanie firmy, która inspiruje i wspiera swoich pracowników.

Dla naszego Klienta poszukujemy osoby na stanowisko: Azure Databricks Architect.

Forma współpracy: B2B/UZ

Czas trwania projektu: 3-6 miesięcy (z możliwością przedłużenia)

Tryb pracy: zdalny

Zakres obowiązków

• Projektowanie architektury platformy danych opartej na Azure Databricks, z uwzględnieniem wymagań biznesowych, technologicznych i infrastrukturalnych.
• Prowadzenie i nadzorowanie wdrożeń platformy Azure Databricks, w tym projektowanie infrastruktury oraz konfiguracja i rozwój środowiska Unity Catalog.
• Definiowanie standardów architektonicznych, dobrych praktyk oraz kierunków rozwoju platformy danych.
• Projektowanie i wdrażanie rozwiązań umożliwiających efektywne zarządzanie danymi, ich przetwarzanie, przechowywanie i udostępnianie.
• Identyfikowanie i wdrażanie nowych funkcjonalności oraz technologii rozszerzających możliwości platformy, w szczególności rozwiązań z obszaru Generative AI (GenAI).
• Projektowanie i wdrażanie procesów wymiany oraz integracji danych z partnerami zewnętrznymi.
• Projektowanie i rozwój procesów orkiestracji oraz automatyzacji przepływów danych z wykorzystaniem Apache Airflow.
• Współpraca z zespołami Data Engineering, Data Science, Cloud oraz innymi zespołami technologicznymi w zakresie projektowania i wdrażania rozwiązań danych.
• Ścisła współpraca z interesariuszami biznesowymi i technicznymi w celu identyfikacji potrzeb, przekładania wymagań na rozwiązania architektoniczne oraz rekomendowania optymalnych podejść technologicznych.
• Nadzorowanie jakości, bezpieczeństwa, skalowalności i wydajności projektowanych rozwiązań.
• Wspieranie zespołów technicznych w podejmowaniu decyzji architektonicznych oraz rozwiązywaniu złożonych problemów technologicznych.

Wymagania

• Kilkuletnie doświadczenie w projektowaniu architektury danych oraz rozwiązań opartych na platformie Azure Databricks.
• Praktyczne doświadczenie w projektowaniu i prowadzeniu wdrożeń platformy Azure Databricks, obejmujące zarówno obszar infrastruktury, jak i konfigurację oraz zarządzanie Unity Catalog.
• Bardzo dobra znajomość architektury i możliwości platformy Databricks, w tym jej zastosowania w środowiskach produkcyjnych.
• Doświadczenie w projektowaniu i wdrażaniu architektury przepływów danych (Data Pipelines) oraz procesów integracji danych.
• Doświadczenie w projektowaniu i wdrażaniu procesów wymiany danych z partnerami zewnętrznymi.
• Praktyczna znajomość Apache Airflow oraz doświadczenie w orkiestracji i automatyzacji procesów przetwarzania danych.
• Doświadczenie w projektowaniu architektury rozwiązań chmurowych w środowisku Microsoft Azure.
• Znajomość zagadnień związanych z bezpieczeństwem danych, zarządzaniem dostępami oraz governance w środowiskach danych.
• Umiejętność analizowania wymagań biznesowych i przekładania ich na skalowalne rozwiązania architektoniczne.
• Doświadczenie w prowadzeniu inicjatyw technologicznych oraz koordynowaniu wdrożeń we współpracy z zespołami technicznymi.
• Umiejętność komunikacji i współpracy z różnymi interesariuszami - zarówno technicznymi, jak i biznesowymi.
• Bardzo dobra znajomość języka angielskiego, umożliwiająca swobodną komunikację w międzynarodowym środowisku.

Mile widziane

• Doświadczenie we wdrażaniu i wykorzystaniu rozwiązań Generative AI (GenAI) w ekosystemie danych i platformach analitycznych.
• Znajomość rozwiązań Databricks związanych z Machine Learning, AI oraz MLOps.
• Doświadczenie w projektowaniu architektury Data Lakehouse.
• Znajomość zagadnień związanych z Data Governance, Data Quality oraz zarządzaniem cyklem życia danych.
• Doświadczenie w integracji platform danych z systemami i usługami partnerów zewnętrznych.
• Znajomość narzędzi Infrastructure as Code, np. Terraform.
• Doświadczenie w pracy z rozwiązaniami CI/CD dla platform danych.

Oferujemy

• Udział w rozwoju nowoczesnej platformy danych opartej na Azure Databricks.
• Możliwość realnego wpływu na architekturę i kierunki rozwoju środowiska technologicznego.
• Pracę z nowoczesnymi technologiami z obszaru Data Engineering, Cloud oraz Generative AI.
• Możliwość projektowania i wdrażania innowacyjnych rozwiązań integracyjnych i analitycznych.
• Współpracę z doświadczonymi zespołami technologicznymi i biznesowymi.
• Długoterminowy projekt z możliwością przedłużenia współpracy.
• Pracę w 100% zdalną.