Lokalizacja | Wrocław | praca w biurze 1 raz na kwartał
O projekcie
Dołącz do Natek jako Data Engineer i wesprzyj projekt dla jednej z czołowych instytucji bankowych, którego celem jest rozwój centralnej warstwy danych oraz budowa i migracja procesów ETL integrujących informacje z wielu źródeł. Będziesz pracować nad rozszerzaniem istniejącej architektury o nowe źródła danych, wspierać migrację do Databricks oraz odgrywać kluczową rolę w procesach zasilających aplikacje biznesowe.
Zakres obowiązków
Prowadzenie procesu integracji danych end-to-end: od zebrania i zrozumienia potrzeby biznesowej, przez analizę źródeł, aż po implementację i wpięcie danych w proces zasilania.
Projektowanie, rozwój i optymalizacja procesów ETL.
Parsowanie danych i praca z dużymi zbiorami informacji.
Integracja z różnorodnymi źródłami danych: API, kolejki (RabbitMQ/Kafka), batch.
Wspieranie migracji procesów do Databricks / PySpark.
Ścisła współpraca z biznesem i innymi jednostkami.
Wymagania
Minimum 3 lata doświadczenia w obszarze Data Engineering.
Bardzo dobra komunikatywność oraz umiejętność współpracy z biznesem.
Samodzielność w prowadzeniu pełnego procesu ETL end-to-end – od analizy wymagań, przez projekt, implementację, aż po wdrożenie.
Silne umiejętności analityczne oraz doświadczenie w tworzeniu analiz biznesowych.
Doświadczenie we wdrażaniu produktów end-to-end i koordynacji tematów między jednostkami.
Zaawansowane umiejętności w zakresie Python.
Zaawansowane umiejętności w zakresie SQL (PL/SQL / Teradata).
Zaawansowane umiejętności w zakresie projektowania i budowy procesów ETL.
Zaawansowane umiejętności w zakresie pracy z PySpark oraz Databricks.
Umiejętność integrowania danych z różnych źródeł (API, kolejki RabbitMQ /Kafka, batch).
Umiejętność parsowania i przetwarzania dużych zbiorów danych.
Mile widziane
Doświadczenie w budowie lub rozwoju aplikacji.
Znajomość RabbitMQ.
Znajomość zasad projektowania architektur danych oraz orkiestracji procesów.
Doświadczenie z rozwiązaniami chmurowymi (Azure/AWS/GCP).
Benefity
Program Mobilności Wewnętrznej – ciesz się wieloma możliwościami rozwoju kariery, rotacją stanowisk, różnorodnością projektów i technologii
Program Poleceń – ciesz się współpracą ze swoimi kolegami i otrzymaj bonus!
Klub NATEK 5/10 lat – oferujemy długoterminową współpracę i świętujemy każdą piątą rocznicę współpracy prezentami
Wydarzenia CSR NATEK i budowanie zespołów – ciesz się naszymi wartościami: odpowiedzialnością, partnerstwem i wiedzą specjalistyczną oraz #workITwithus
Kafeteria
Opieka medyczna
Karta Klubu Multisport
Szkolenia techniczne i personalne
Kursy językowe
Dodatkowo tylko dla UOP:
Ubezpieczenie na życie
Bonusy za wydarzenia personalne
Dzień wolny na wolontariat