Architekt Data Platform - Infrastruktura (m/k)

Cel

Projektowanie, rozwój i nadzór nad architekturą techniczną Platformy Data Lakehouse, obejmującą infrastrukturę, środowiska uruchomieniowe, bezpieczeństwo, monitoring oraz integrację komponentów platformowych.

Zakres odpowiedzialności

1. Architektura platformy

• Definiowanie docelowej architektury technicznej Platformy Data Lakehouse.

• Opracowanie roadmapy rozwoju platformy na lata 2027-2029.

• Dobór technologii oraz standardów technicznych.

• Nadzór nad zgodnością wdrażanych rozwiązań z architekturą referencyjną.

2. Środowiska i infrastruktura

• Planowanie rozwoju środowisk.

• Nadzór nad migracją i utrzymaniem środowiska produkcyjnego.

• Zarządzanie wymaganiami dotyczącymi zasobów infrastrukturalnych oraz pojemności środowisk.

• Współpraca z zespołami infrastrukturalnymi w zakresie dostępności, wydajności i bezpieczeństwa platformy.

3. Monitoring

• Projektowanie architektury monitoringu platformy.

• Definiowanie standardów logowania, metryk, alertów i dashboardów operacyjnych.

• Nadzór nad wdrażaniem narzędzi monitorujących.

• Definiowanie KPI technicznych dla platformy.

• Definiowanie standardów zarządzania użytkownikami, środowiskami i zasobami.

• Projektowanie mechanizmów automatyzacji operacyjnej oraz administracyjnej.

• Nadzór nad implementacją polityk bezpieczeństwa i dostępu.

4. Integracja i architektura techniczna procesów

• Projektowanie architektury integracyjnej platformy.

• Zaprojektowanie wykorzystania Apache Kafka w architekturze docelowej.

• Definiowanie wzorców komunikacji między komponentami platformy.

5. Bezpieczeństwo i ciągłość działania

• Projektowanie architektury wysokiej dostępności.

• Definiowanie procedur Disaster Recovery i Backup.

• Nadzór nad bezpieczeństwem infrastruktury i konfiguracją komponentów platformowych.

• Współpraca z zespołami bezpieczeństwa i infrastruktury.

Od kandydatów oczekujemy:

• Pełnienia roli lidera technicznego rozwiązania

• Nadzór nad wykonywaniem zadań technicznych, code review, wsparcie wdrożenia do zespołu

• Dobór technologii i rozwiązywanie problemów technicznych

• Współpraca z inżynierami infrastruktury w budowie i utrzymaniu infrastruktury dla platformy

• Specyfikowanie komponentów rozwiązania (np. źródła danych, transformacje, repozytoria)

• Zapewnienie mechanizmów monitorowania i testowania platformy

• Znajomość technologii:

• Apache Iceberg, Apache Spark, DBT

• Terraform, Airflow, Docker, Kubernetes

• Narzędzia monitorujące

• CI/CD

• Python

• doświadczenie: min. 10 lat pracy, w tym min. 3 lata na stanowisku architekt

• Min. 5 lat doświadczenia w implementacji rozwiązań BigData, Data Lake lub Data Lakehouse

• wykształcenie: wyższe

• znajomość języka angielskiego na poziomie komunikatywnym

• chęci rozwoju osobistego

Mile widziane

• doświadczenie w branży elektroenergetycznej

• doświadczenie w rozwiązaniach typu Data Lakehouse np. Dremio

Z naszej strony zapewniamy:

• Udział w projektach greenfield mających strategiczny wpływ na sektor energetyczny w Polsce i w Europie

• Pracę w przyjaznej atmosferze i wsparcie zespołu nastawionego na dzielenie się wiedzą oraz doświadczeniami