Architekt Systemowy Senior – Data Lake / DWH (F/M)

Branża bankowa

Czym będziesz się zajmować?

• Projektowaniem i budową pipeline’ów zasilających ETL/ELT (online i offline)
• Rozwijaniem rozwiązań Data Lake i DWH w środowisku on-premises i GCP
• Tworzeniem przepływów danych w Pythonie i/lub Ruście dla danych strukturalnych i niestrukturalnych
• Budowaniem rozwiązań Big Data z wykorzystaniem możliwości GenAI
• Strojeniem zapytań SQL na bazach relacyjnych i hurtownianych
• Przygotowywaniem tematycznych datamartów
• Tworzeniem koncepcji rozwiązań na podstawie wymagań biznesowych
• Pracą zgodnie z modelem DevSecOps

Wymagane

• Doświadczenie w budowie pipeline’ów ETL/ELT
• Praktyczna znajomość projektowania Data Lake i DWH
• Znajomość architektury sterowanej zdarzeniami: Kafka, Pub/Sub
• Google BigQuery
• Kubernetes (GKE lub OpenShift)
• Bazy danych Oracle i PostgreSQL: projektowanie, budowa i tuning
• Biegła znajomość Pythona i/lub Rusta
• Apache Airflow

Mile widziane

• Data mesh
• Bazy wektorowe i grafowe
• Apache Spark (GCP Dataproc) / Apache Beam (GCP Dataflow)
• AutomateNow, Informatica Power Center