Senior Data Engineer

Projekt

Dołącz do nowego zespołu rozwijającego skalowalną platformę wiedzy wykorzystywaną przez wiele zespołów. Będziesz pracować na styku Data Engineeringu, AI i Platform Engineeringu mając realny wpływ na architekturę i kierunek rozwoju rozwiązania.

Kwestie organizacyjne

• Elastyczne standardowe godziny pracy
• Komunikacja w języku polskim i angielskim
• Tryb pracy: hybryda - 6 x w miesiącu praca z biura w Krakowie

Wymagania

• Minimum 5 lat doświadczenia jako Data Engineer lub podobnej roli.
• Bardzo dobra znajomość Python oraz SQL.
• Praktyczne doświadczenie z Knowledge Graph.
• Doświadczenie w projektowaniu modeli danych NoSQL.
• Praktyka z danymi strukturalnymi i niestrukturalnymi, w tym treścią dokumentów, metadanymi źródłowymi i danymi po ekstrakcji.
• Doświadczenie w projektowaniu reużywalnych frameworków pipeline’ów dla wielu źródeł, projektów lub domen.
• Swoboda w pracy z danymi strukturalnymi i niestrukturalnymi, w tym treścią dokumentów, metadanymi źródłowymi i danymi po ekstrakcji.
• Znajomość chmurowych usług danych, orkiestracji pipeline’ów, CI/CD i monitoringu.
• Bardzo dobra znajomość języka angielskiego (min. B2) i języka polskiego (min.B2).
• Otwartość na pracę z biura w Krakowie 6 x w miesiącu.

Mile widziane

• Praktyka w rozwiązaniach AI, LLM
• Znajomość RAG.
• Doświadczenie z ontologiami.
• Doświadczenie w środowiskach enterprise.

Zadania w projekcie

• Projektowanie, budowa i utrzymanie pipeline’ów end-to-end.
• Tworzenie reużywalnych konektorów i komponentów dla danych strukturalnych i niestrukturalnych.
• Rozwój modeli danych dla baz relacyjnych, grafowych i NoSQL.
• Rozwój warstwy Knowledge Graph i przekładanie ontologii na modele danych.
• Zapewnienie jakości danych, lineage i provenance.
• Współtworzenie standardów bezpieczeństwa, kontroli dostępów, observability i cyklu życia danych.

Dlaczego warto

• Praca na styku Data Engineeringu, AI i Platform Engineeringu.
• Wpływ na architekturę i kierunek rozwoju platformy, bo część decyzji wciąż nie jest podjęta.
• Praca z rozwiązaniami LLM, AI na co dzień.
• Długofalowy projekt w międzynarodowym środowisku.
• Możliwość rozwoju w kierunku technicznego leadershipu.