Data Engineer (GCP)

Projekt koncentruje się na projektowaniu, rozwijaniu i utrzymywaniu procesów przetwarzania danych w środowisku chmurowym. Zakres współpracy obejmuje integrację danych z wielu źródeł, rozwój procesów ETL oraz dostarczanie rozwiązań wspierających analitykę i raportowanie.

Do realizacji projektu poszukiwana jest osoba do współpracy w roli Data Engineer. Istotnym obszarem współpracy będzie rozwój skalowalnych rozwiązań danych opartych o technologie chmurowe.

Dostępność: poszukiwane są osoby dostępne od zaraz lub z maksymalnie 1-miesięczną dostępnością.

Czym będziesz się zajmować?

• Projektowaniem i rozwijaniem procesów przetwarzania danych w środowisku Google Cloud Platform.
• Budową, utrzymaniem oraz optymalizacją procesów ETL wspierających analitykę i raportowanie.
• Tworzeniem oraz rozwijaniem rozwiązań opartych o PySpark do przetwarzania dużych wolumenów danych.
• Pracą z dużymi zbiorami danych oraz zapewnianiem jakości i spójności przetwarzanych informacji.
• Tworzeniem i optymalizacją rozwiązań opartych o BigQuery.
• Przygotowywaniem i rozwijaniem integracji danych pomiędzy różnymi systemami.
• Współpracą z zespołami technicznymi oraz biznesowymi przy realizacji inicjatyw opartych o dane.

Czego oczekujemy?

Must have:

• Minimum 4 lata doświadczenia w obszarze Data Engineering.
• Bardzo dobra znajomość Python.
• Praktyczne doświadczenie z PySpark.
• Zaawansowana znajomość SQL.
• Doświadczenie w pracy z Google Cloud Platform.
• Praktyczna znajomość BigQuery.
• Doświadczenie w budowie i utrzymaniu procesów ETL.
• Umiejętność projektowania rozwiązań do przetwarzania danych na dużą skalę.
• Dobra znajomość języka angielskiego.

Nice to have:

• Doświadczenie z narzędziami orkiestracji procesów danych.
• Znajomość rozwiązań związanych z Data Warehouse lub Data Lake.
• Doświadczenie w pracy w środowiskach Agile.
• Znajomość narzędzi CI/CD.

Dlaczego warto?

• Możliwość realizacji projektów opartych o nowoczesne technologie danych i rozwiązania chmurowe.
• Udział w inicjatywach związanych z przetwarzaniem dużych wolumenów danych.
• Współpraca z doświadczonymi specjalistami z obszaru Data i Cloud.
• Realny wpływ na rozwój oraz optymalizację platform danych.
• Partnerski model współpracy i nowoczesne środowisko technologiczne.