Data Architect (Azure/Databricsk)

O projekcie Miejsce pracy: Zdalnie (wizyta w biurze w Warszawie raz w miesiącu)

Start: ASAP Forma współpracy: B2B z ITFS

Stawka: 190 - 210 PLN/h + VAT

Proces rekrutacyjny: Krótka rozmowa telefoniczna z rekruterem ITFS -> Rozmowa techniczna-> Decyzja

Zakres obowiązków

• Projektowanie i wdrażanie skalowalnych rozwiązań hurtowni danych oraz analityki w chmurze przy użyciu Azure Data Lake, Azure Databricks, Microsoft Fabric i powiązanych usług (np. Power BI),
• Definiowanie dobrych praktyk w zakresie zarządzania danymi, bezpieczeństwa, optymalizacji wydajności i efektywności kosztowej w środowiskach Azure i Databricks,
• Współpraca z zespołami interdyscyplinarnymi (inżynierami danych, badaczami danych i architektami chmury) w celu dostarczania kompleksowych rozwiązań platform danych,
• Integracja Databricks z szerszym ekosystemem Azure, w tym z jeziorami danych, ramami AI/ML, systemami raportowania i katalogami danych (Unity Catalog, Purview),
• Doradztwo klientom w zakresie strategii modernizacji, w tym migracji z tradycyjnych lokalnych baz danych do architektur opartych na Azure i Databricks,
• Wsparcie działań przedsprzedażowych i koncepcyjnych, w tym szacowanie kosztów, przygotowywanie proof-of-concept oraz ocena technologii,
• Śledzenie innowacji w obszarze Azure, Databricks i Microsoft Fabric oraz stosowanie trendów branżowych w realizowanych projektach,
• Współpraca na wszystkich kluczowych etapach rozwoju projektu z analitykami biznesowymi, ekspertami systemów źródłowych, architektami danych, inżynierami i właścicielami produktów,
• Proponowanie i obrona skutecznych, spójnych rozwiązań łączących rozwój strategiczny z istniejącą architekturą,
• Przejrzysta komunikacja i dokumentowanie pracy z uwzględnieniem czynników wydajnościowych i kosztowych w decyzjach projektowych.

Wymagania

• Doświadczenie na stanowisku Data Architect w obszarze poniższych technologii,
• Praktyczne doświadczenie w projektowaniu i wdrażaniu platform danych w chmurze Azure oraz Databricks, w tym optymalizacja wydajności, konfiguracja bezpieczeństwa, automatyzacja i udostępnianie danych,
• Bardzo dobra znajomość SQL, PySpark, modelowania danych (3NF, schematy gwiazdy i płatka śniegu) oraz wzorców projektowych ELT/ETL (w tym Azure Data Factory),
• Biegła znajomość języka Python lub podobnych języków skryptowych do transformacji, orkiestracji i automatyzacji danych,
• Doświadczenie z zaawansowanymi funkcjami Databricks (Unity Catalog, MLflow, Jobs & Pipelines),
• Głębokie zrozumienie zasad architektury danych w chmurze, w tym koncepcji Data Lakehouse, architektury Medallion, integracji API oraz architektury sterowanej zdarzeniami,
• Kompleksowa znajomość architektury Azure Databricks oraz Microsoft Fabric, obejmująca ich kluczowe komponenty, strategie integracji i dobre praktyki tworzenia bezpiecznych rozwiązań danych,
• Doświadczenie w zakresie CI/CD i praktyk DevOps dla przepływów danych (Git, Terraform, Azure DevOps),
• Doskonałe umiejętności komunikacyjne i interpersonalne w kontaktach z klientem z zdolnością przekładania potrzeb biznesowych na rozwiązania techniczne,
• Umiejętność efektywnej współpracy w zespołach interdyscyplinarnych,
• Znajomość języka angielskiego na poziomie min. B2/C1.