Senior Data Engineer

Projekt:

Dołącz do nowego zespołu rozwijającego skalowalną platformę wiedzy wykorzystywaną przez wiele zespołów. Będziesz pracować na styku Data Engineeringu, AI i Platform Engineeringu mając realny wpływ na architekturę i kierunek rozwoju rozwiązania.

Kwestie organizacyjne:

• Elastyczne standardowe godziny pracy

• Komunikacja w języku polskim i angielskim

• Tryb pracy: hybryda - 6 x w miesiącu praca z biura w Krakowie

Wymagania:

• Minimum 5 lat doświadczenia jako Data Engineer lub podobnej roli.

• Bardzo dobra znajomość Python oraz SQL.

• Praktyczne doświadczenie z Knowledge Graph.

• Doświadczenie w projektowaniu modeli danych NoSQL.

• Praktyka z danymi strukturalnymi i niestrukturalnymi, w tym treścią dokumentów, metadanymi źródłowymi i danymi po ekstrakcji.

• Doświadczenie w projektowaniu reużywalnych frameworków pipeline’ów dla wielu źródeł, projektów lub domen.

• Swoboda w pracy z danymi strukturalnymi i niestrukturalnymi, w tym treścią dokumentów, metadanymi źródłowymi i danymi po ekstrakcji.

• Znajomość chmurowych usług danych, orkiestracji pipeline’ów, CI/CD i monitoringu.

• Bardzo dobra znajomość języka angielskiego (min. B2) i języka polskiego (min.B2).

• Otwartość na pracę z biura w Krakowie 6 x w miesiącu.

Mile widziane:

• Praktyka w rozwiązaniach AI, LLM

• Znajomość RAG.

• Doświadczenie z ontologiami.

• Doświadczenie w środowiskach enterprise.

Zadania w projekcie:

• Projektowanie, budowa i utrzymanie pipeline’ów end-to-end.

• Tworzenie reużywalnych konektorów i komponentów dla danych strukturalnych i niestrukturalnych.

• Rozwój modeli danych dla baz relacyjnych, grafowych i NoSQL.

• Rozwój warstwy Knowledge Graph i przekładanie ontologii na modele danych.

• Zapewnienie jakości danych, lineage i provenance.

• Współtworzenie standardów bezpieczeństwa, kontroli dostępów, observability i cyklu życia danych.

Dlaczego warto:

• Praca na styku Data Engineeringu, AI i Platform Engineeringu.

• Wpływ na architekturę i kierunek rozwoju platformy, bo część decyzji wciąż nie jest podjęta.

• Praca z rozwiązaniami LLM, AI na co dzień.

• Długofalowy projekt w międzynarodowym środowisku.

• Możliwość rozwoju w kierunku technicznego leadershipu.