Senior Data Engineer

🏢 Summary: Long-term, fully remote contract for a Databricks Data Engineer to design and implement large-scale data processing solutions for international clients across multiple industries. The role focuses on building and optimizing scalable data pipelines in cloud environments while ensuring data security, governance, and best practices. You will collaborate with Solution Architects and contribute to the maintenance and evolution of existing data platforms. 🗂️ Requirements: 5–6 years experience in data engineering, Hands-on experience with Databricks on large-scale datasets, Experience building and optimizing data pipelines in Python, Experience with cloud-based data processing tools, Knowledge of data security principles in cloud environments, Knowledge of Data Governance principles, Ability to collaborate with Solution Architects and follow best practices, English level B2 or higher 📃 Skills: Databricks, Python, Cloud, DataEngineering, DataGovernance, Security, ETL, SQL 🏢 Description: Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko Databricks Data Engineer . Zakres obowiązków: Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, finanse, bankowość czy produkcja. Projektowanie i wdrażanie rozwiązań do przetwarzania danych przy użyciu Databricks dla wielkoskalowych i zróżnicowanych zbiorów danych. Tworzenie, rozwijanie i optymalizacja data pipeline'ów z wykorzystaniem Pythona oraz narzędzi chmurowych. Współpraca z Solution Architects w celu definiowania i stosowania best practices w obszarze inżynierii danych. Zapewnienie spójności, bezpieczeństwa i skalowalności danych w środowiskach chmurowych. Udział w utrzymaniu i dalszym rozwoju istniejących rozwiązań danych. Oczekujemy: Mile widziane 5–6 lat doświadczenia w obszarze inżynierii danych. Praktycznej znajomości platformy Databricks w pracy z dużymi i zróżnicowanymi zbiorami danych. Doświadczenia w tworzeniu i optymalizacji data pipeline'ów z wykorzystaniem Python. Znajomości narzędzi chmurowych stosowanych w przetwarzaniu danych. Umiejętności współpracy z architekturą rozwiązań i stosowania best practices w data engineering. Znajomości zasad bezpieczeństwa i Data Governance w środowiskach chmurowych. Znajomości języka angielskiego na poziomie B2 lub C1 – umożliwiającej swobodną komunikację w międzynarodowym środowisku. Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca. Oferujemy: Długofalowa współpraca z wynagrodzeniem w przedziale 110-140 PLN netto/godz. + VAT. Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia. Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie). Współpraca w pełni zdalna. Benefity - prywatna opieka medyczna, karta Multisport. Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.

🏢 Summary: Long-term remote B2B opportunity for a Senior Data Engineer focused on building enterprise-scale data platforms, ETL/ELT pipelines, and Gen AI/LLM solutions for a US financial sector client. The role involves designing PoCs, developing production-grade applications, and working autonomously within an international team using AWS cloud and modern data engineering technologies. 🗂️ Requirements: Minimum 8 years of experience as Data Engineer, Strong Python skills, Strong SQL skills, Experience with ETL/ELT pipelines, Commercial experience with LLM projects, Experience in enterprise/global corporate environments, Very good knowledge of FastAPI, Very good knowledge of Airflow, Very good knowledge of AWS, Very good knowledge of Snowflake, Very good knowledge of Terraform, Very good knowledge of Neo4j, Very good knowledge of Jenkins, Very good knowledge of Docker, Experience with AWS cloud services, Experience with Data Warehouse solutions, Experience working with Docker, Airflow, Terraform or similar tools, Ability to work independently in enterprise environments, English proficiency at C1 level, Availability for 14:00–18:00 CET overlap with New York 📃 Skills: Python, SQL, ETL, ELT, LLM, FastAPI, Airflow, AWS, Snowflake, Terraform, Neo4j, Jenkins, Docker, Redshift, RDBMS, NoSQL, Matplotlib, Seaborn, Bokeh, Pandas, NumPy, scikit-learn 🏢 Description: Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko: AWS Senior Data LLM Engineer. Zakres obowiązków: Długofalowa współpraca z polską firmą IT, typu softwarehouse i outsourcing, specjalizująca się w dostarczaniu oprogramowania dla topowych organizacji finansowych, start-up'ów, funduszy i instytucji bankowych ze Stanów Zjednoczonych. Głównym celem roli jest projektowanie i wdrażanie systemów, wewnętrznych narzędzi oraz infrastruktury danych, które usprawniają procesy decyzyjne oparte na danych agregowanych z różnych źródeł — zarówno wewnętrznych, jak i zewnętrznych. Projekty mają silny komponent Gen AI/LLM, dlatego szukamy osoby, która nie tylko dobrze odnajduje się w klasycznym Data Engineeringu, ale też ma praktyczne doświadczenie z wykorzystaniem modeli językowych w realnych rozwiązaniach. Szukamy doświadczonego Senior Data Engineera, który dołączy do długoterminowego projektu realizowanego dla dużego klienta enterprise z USA z sektora finansów, inwestycji i real estate. Projektowanie i rozwijanie PoC z wykorzystaniem najnowszych technologii, w tym rozwiązań opartych o LLM i Gen AI. Eksperymentowanie z integracjami zewnętrznych narzędzi, API oraz źródeł danych. Współtworzenie i wdrażanie aplikacji produkcyjnych po zatwierdzeniu PoC. Budowanie narzędzi, rozwiązań i infrastruktury, które zwiększają samowystarczalność Data Scientistów oraz analityków biznesowych. Agregowanie, modelowanie i porządkowanie danych z wielu źródeł. Rozwój Data Lake, Data Warehouse oraz pipeline’ów ETL/ELT. Pracę z architekturą danych w środowisku enterprise. Szukanie nowych sposobów wykorzystania Gen AI w procesach biznesowych i analitycznych. Stack to między innymi: Python, FastAPI, Airflow, AWS Cloud, Snowflake, Terraform, Neo4j, Jenkins, SQL, Docker oraz dodatkowo Redshift, RDBMS, noSQL, Matplotlib, Seaborn, Bokeh, Pandas, NumPy, scikit-learn. Każdy projekt w większym lub mniejszym stopniu dotyka obszaru LLM/Gen AI — od integracji modeli, przez wykorzystanie danych semantycznych, po budowanie narzędzi wspierających analizę i podejmowanie decyzji. PoC trwają zwykle kilka miesięcy, a współpraca ma charakter długoterminowy. Współpraca z międzynarodowym zespołem, możliwe gapy w godzinach 14:00-18:00 polskiego czasu. Zespół pracuje bardzo autonomicznie. Klient dostarcza wymagania biznesowe, zespół doprecyzowuje zakres, projektuje rozwiązanie, dowozi PoC, a po jego zatwierdzeniu wdraża rozwiązanie produkcyjnie. Oczekujemy: Szukamy doświadczonego Senior Data Engineera, który dołączy do długoterminowego projektu realizowanego dla dużego klienta enterprise z USA z sektora finansów, inwestycji i real estate. Minimum 8 lat doświadczenia jako Data Engineer. Największy nacisk na oczekiwania to: mocny Python, SQL, ETL/ELT i koniecznie projekty w doświadczeniu, w których wykorzystywany był LLM oraz w pracy w środowisku, globalny, korporacyjnym. Bardzo dobra znajomość: LLM, Python, FastAPI, Airflow, AWS, Snowflake, Terraform, Neo4j, Jenkins, SQL, Docker. Mile widziana znajomość: Redshift, RDBMS, noSQL, Matplotlib, Seaborn, Bokeh, Pandas, NumPy, scikit-learn - nie oczekujemy znajomości tych technologii, ale z racji używania ich w projekcie, jest możliwość nauczenia się ich nawet od zera. Doświadczenie z AWS i usługami chmurowymi. Doświadczenie z Data Warehouse, szczególnie Snowflake. Doświadczenie w pracy z Dockerem, Airflow, Terraformem lub podobnymi narzędziami. Dojrzałość techniczną i seniorskie podejście do dowożenia rozwiązań. Umiejętność samodzielnej pracy w środowisku enterprise. Bardzo dobrą komunikację po angielsku — minimum C1, Gotowość do pracy z 4-godzinnym overlape’em z Nowym Jorkiem, najlepiej w godzinach 14:00–18:00 czasu polskiego. Oferujemy: Długofalowa współpraca B2B (kontrakt na czas nieokreślony) z wynagrodzeniem w przedziale 50-55 USD netto/godz. Brak płatnych urlopów. Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia. Sprawny proces rekrutacyjny - 90 minut rozmowy technicznej, następnie ok. 20 minut formalnej rozmowy z Hiring Managerem i decyzja. Współpraca w pełni zdalna. Benefity - Multisport/Medicover, licencje na AI toole, Claude, Cursor itp. Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją. Spotkania integracyjne.

🏢 Summary: Short-term contract role for a Senior AWS Cloud Engineer focused on designing and implementing scalable, reliable data ingestion and transformation pipelines in AWS. The position combines hands-on development in PySpark and Python with architectural responsibility, CI/CD and IaC practices, and integration with analytical platforms such as Snowflake. The role also includes establishing data engineering standards and ensuring security, governance, and data quality across solutions. 🗂️ Requirements: Minimum 8 years of experience in AWS Data Engineering, Strong experience with AWS data services (S3, Glue, Lambda, Step Functions), Strong programming skills in Python, Strong programming skills in PySpark, Experience designing and maintaining scalable data pipelines, Knowledge of data modeling and ETL/ELT patterns, Experience with data quality, data lineage and observability mechanisms, Experience with CI/CD for data and code, Experience with Infrastructure as Code (Terraform or CloudFormation), Experience integrating AWS with analytical platforms such as Snowflake 📃 Skills: AWS, S3, Glue, Lambda, StepFunctions, Python, PySpark, Snowflake, Terraform, CloudFormation, CI/CD, ETL, ELT, IAM 🏢 Description: Poszukujemy doświadczonego AWS Senior Cloud Engineera, który łączy praktyczne umiejętności developerskie z kompetencjami architektonicznymi. Idealny kandydat będzie projektować i wdrażać solidne pipeline’y ingestujące dane, transformacje danych zgodne z wymaganiami biznesowymi oraz ustanawiać najlepsze praktyki developmentu w środowisku AWS. Wymagane jest doświadczenie z PySpark oraz Pythonem. Rola obejmuje również mentoring członków zespołu, przeprowadzanie code review oraz wyznaczanie standardów data engineeringowych w projektach. Projekt start: lipiec 2026 do końca grudnia 2026 1 FTE (19 dni w miesiącu) Główne obowiązki Projektowanie, rozwijanie i operacyjne utrzymanie kompleksowych pipeline’ów do ingestii danych w AWS, wspierających różne strategie ładowania danych, z naciskiem na niezawodność, skalowalność i optymalizację kosztów. Budowanie, walidacja i optymalizacja transformacji danych zgodnie z wymaganiami biznesowymi z wykorzystaniem PySpark i Python. Projektowanie i wdrażanie mechanizmów kontroli jakości danych, logowania, monitoringu oraz alertowania dla pipeline’ów ingestii i transformacji danych. Definiowanie i egzekwowanie najlepszych praktyk natywnych dla AWS w zakresie developmentu, bezpieczeństwa, IAM governance, networkingu, data governance oraz optymalizacji kosztów. Wsparcie procesów CI/CD oraz praktyk IaC (Infrastructure as Code), np. z wykorzystaniem CloudFormation/Terraform, dla powtarzalnych i audytowalnych wdrożeń. Zapewnienie uwzględnienia aspektów bezpieczeństwa danych, prywatności i compliance we wszystkich pipeline’ach danych. Prowadzenie projektowania i implementacji pipeline’ów danych w AWS oraz integracja z downstreamowymi platformami analitycznymi, takimi jak Snowflake. Dokumentowanie szczegółów technicznych i architektury w wiki. Mentoring i wsparcie zespołu, prowadzenie dokładnych code review, udzielanie konstruktywnego feedbacku oraz promowanie standardów jakości kodu i testowalności. Identyfikowanie, prototypowanie i ewaluacja nowych usług AWS oraz narzędzi third-party w celu poprawy niezawodności platformy i produktywności developerów. Wymagane kwalifikacje Minimum 8 lat praktycznego doświadczenia w AWS Data Engineering, ze szczególnym naciskiem na development i architekturę. Bardzo dobra znajomość budowania pipeline’ów ingestujących dane z wykorzystaniem usług AWS (S3, AWS Glue, Lambda, Step Functions oraz pokrewnych usług). Mocne umiejętności programowania w PySpark i Python oraz doświadczenie w tworzeniu wydajnych i skalowalnych pipeline’ów przetwarzania danych. Dogłębna wiedza z zakresu modelowania danych, data lake/data warehouse oraz wzorców ETL/ELT. Doświadczenie we wdrażaniu mechanizmów kontroli jakości danych, data lineage, logowania i observability. Doświadczenie z CI/CD dla danych i kodu, IaC (Terraform/CloudFormation) oraz workflow opartymi o version control. Bardzo dobre umiejętności analityczne i komunikacyjne oraz zdolność do mentoringu i przewodzenia zespołowi poprzez przykład.

🏢 Summary: Senior Data Engineer role focused on large-scale migration from SQL Server to Databricks/Delta Lake, transforming complex SQL logic into production-grade Python/PySpark solutions. The position centers on enterprise-level data engineering, data modeling, and software development within a Medallion Architecture. The project involves redesigning and implementing scalable data solutions for thousands of databases in a long-term transformation initiative. 🗂️ Requirements: Very strong Python skills, Very strong PySpark skills, Proven experience with Databricks, Proven experience with Delta Lake, Strong SQL skills and ability to understand complex stored procedures, Experience working with large, shared codebases, Solid object-oriented programming knowledge, Strong data modeling experience (transactional and analytical), Experience in platform/data migration projects, Knowledge of Medallion Architecture (Bronze/Silver/Gold), Experience with large-scale data processing, Very good English skills, EU citizenship, Residence in Poland 📃 Skills: Python, PySpark, Databricks, DeltaLake, SQL, OOP, DataModeling, MedallionArchitecture, AzureDataFactory, AzureDevOps, Git, CI/CD, PowerBI 🏢 Description: In Cyclad we work with top international IT companies in order to boost their potential in delivering outstanding, cutting-edge technologies that shape the world of the future. We are seeking an experienced Senior Data Engineer with Python and Databricks. This role supports a large-scale transformation from SQL Server–based systems to a Databricks / Delta Lake platform. The focus is on enterprise-grade data engineering and software development , not analytics or reporting. The project is SQL2Databricks migration, it involves 3500-4000 SQL DBs (2TB), replicating data in different shapes/ schemas to Databricks. Project information: Type of project: IT Services Office location: Poland Work model: Remote from Poland Budget: 140 - 160 PLN net/ h - b2b Project length: till the end of 2026, possible to extend it Only candidates with citizenship in the European Union and residence in Poland Start date: ASAP Project scope: Support a large-scale transformation from SQL Server–based systems to a Databricks / Delta Lake platform Transform complex, business-critical SQL logic (stored procedures) into clean, maintainable, and scalable Python / PySpark code Redesign and implement this logic in Python / PySpark within Databricks Contribute to a large, long-running data engineering codebase used by multiple teams Develop production-grade transformation code (packages, modules, reusable components) Design and evolve data models within a Medallion Architecture (Bronze / Silver / Gold) across multiple data layers Ensure software engineering quality, reusability, and long-term maintainability Apply software engineering best practices (clean code, OOP, modularization, refactoring) Work with very large data volumes and highly parallel, event-driven transformations Actively participate in code reviews and technical design discussions Support orchestration workflows (e.g., Azure Data Factory) Competence demands: Very strong Python and PySpark skills; proven experience with Databricks and Delta Lake Experience working in large, shared codebases (beyond notebooks) Strong SQL skills, especially reading and understanding complex logic Solid object-oriented programming experience, clean code principles Strong data modelling background (transactional and analytical) Experience in redesigning models during platform migrations Familiarity with layered data architectures (Bronze / Silver / Gold) Very good English skills Nice to have: Azure Data Factory (orchestration) Azure DevOps, Git, CI/CD pipelines Power BI or analytics tooling Infrastructure / DevOps knowledge (not mandatory) We offer: Remote working model Dynamic and innovation-driven engineering environment Full-time job agreement based on b2b Private medical care with dental care (covering 70% of costs) Multisport card (also for an accompanying person) Life insurance

🏢 Summary: Long-term remote contract for a Senior Python GenAI Developer to design and build high-performance applications using LLM technologies in international consulting projects. The role covers full software development lifecycle, including architecture design, data analysis, implementation, testing, deployment, and support. Projects involve modern AI-driven solutions for enterprise clients across various industries, including finance. 🗂️ Requirements: Higher education in Computer Science or related field, Minimum 7 years of experience as Python Developer, Very strong knowledge of Python, Strong knowledge of relational databases and ORM frameworks, Experience with LLM technologies (e.g., OpenAI, GPT), Experience with data processing and data science libraries, Experience in software testing and code quality analysis tools, Knowledge of version control systems, Knowledge of design patterns and practical application, English level B2 or higher 📃 Skills: Python, SQL, SQLAlchemy, OpenAI, GPT, Pandas, NumPy, SciPy, Spark, pytest, flake8, pylint, Git, FastAPI, Flask, Java, NodeJS, .NET, poetry, pipenv 🏢 Description: Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko: Senior Python GenAI Developer. Zakres obowiązków: Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, finanse, bankowość czy produkcja. Współpraca z departamentem tworzącym rozwiązania IT dla klientów z Polski i zagranicy, w tym dla instytucji z sektora finansowego. Projekty obejmują pełen cykl wytwarzania oprogramowania – od projektowania i implementacji, przez analizę danych oraz definiowanie wymagań biznesowych, po wdrożenia i wsparcie użytkowników. Projektowanie i implementacja nowoczesnych aplikacji, aktywny udział w tworzeniu architektury wysokowydajnych rozwiązań. Opracowywanie i utrzymywanie dokumentacji projektowej, udział we wdrożeniach oprogramowania. Współpraca z użytkownikami i zespołem projektowym przy rozwiązywaniu bieżących problemów. Współpraca z międzynarodowym środowiskiem. Oczekujemy: Wyższe wykształcenie informatyczne lub pokrewne. Minimum 7 lat doświadczenia jako Python Developer. Bardzo dobra znajomość Python oraz relacyjnych baz danych (w tym frameworki ORM, np. SQLAlchemy). Doświadczenie w budowie i rozwoju aplikacji z wykorzystaniem technologii LLM (np. OpenAI, GPT). Znajomość bibliotek do przetwarzania danych i data science ( m.in . Pandas, NumPy, SciPy, Spark). Umiejętność testowania oprogramowania (pytest) i analizy jakości kodu (flake8, pylint). Znajomość systemów kontroli wersji, wzorców projektowych i ich praktycznego zastosowania. Mile widziane: znajomość innych technologii backendowych (np. Java, NodeJS, .NET); znajomość frameworków webowych (np. FastAPI, Flask); doświadczenie w pracy ze środowiskami wirtualnymi i narzędziami (poetry, pipenv). Mile widziana jest dostępność ASAP, akceptowalny jest maksymalnie miesięczny okres wypowiedzenia, ze skutkiem na koniec miesiąca. Znajomość języka angielskiego na poziomie B2 lub C1 - umożliwiająca swobodną komunikację w międzynarodowym środowisku. Oferujemy: Długofalowa współpraca z wynagrodzeniem w przedziale 150-170 PLN netto/godz. + VAT. Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia. Sprawny i szybki proces rekrutacyjny - jedna, maksymalnie dwie rozmowy techniczne z managerami, online (każda po godzinie). Współpraca w godzinach 9:00-17:00, możliwa lekka elastyczność. Współpraca w pełni zdalna. Benefity - prywatna opieka medyczna, karta Multisport. Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.