PySpark / Foundry Engineer

BPX to przede wszystkim ludzie tworzący nasz wyjątkowy team oraz wartości, którymi kierujemy się w naszej codziennej pracy. Od ponad 18 lat tworzymy zgrany zespół dynamicznie rozwijającej się firmy konsultingowej. Specjalizujemy się w doskonaleniu procesów zarządzania z wykorzystaniem nowoczesnych technologii i systemów do zarządzania klasy ERP i Business Intelligence. Z sukcesem realizujemy projekty dla znanych marek w Polsce i na całym świecie.

PySpark / Foundry Engineer 

 

Udział w budowie i migracji procesów ETL/ELT w środowisku Palantir Foundry w ramach MediCom Data Sphere – docelowo Foundry jako główny Data Lake dla obszaru Healthcare Commercial.

 

Zakres obowiązków:

 

Budowa i optymalizacja przepływów danych (data flows) z systemów źródłowych do Data Lake (Foundry) z wykorzystaniem PySpark

Tworzenie struktur danych w Data Lake (Foundry)

Implementacja procesów ETL zgodnie z architekturą definiowaną przez architektów klienta

Estymacja i realizacja zadań w systemie ticketowym (Azure DevOps / Jira)

Udział w ceremoniach SCRUM (planowanie, review)

Tworzenie dokumentacji technicznej (Confluence)

Konsultacje i wsparcie zespołu oraz użytkowników końcowych (handover wiedzy)

Technologie / narzędzia:

 

PySpark / Python

Palantir Foundry (Data Lake)

Azure DevOps / Jira

Confluence

Model pracy:

 

Praca w Scrumie (sprinty 3-tygodniowe)

Zadania przydzielane podczas sprint planning, review z Product Ownerem na koniec sprintu

 

Rezultat:

Zbudowanie struktur danych w Palantir Foundry dla krajów objętych priorytetem w programie MediCom.