Senior Data Engineer

Comarch — Poland · Posted ~5 hours ago

Senior Full-time

Skills

Data engineering SQL Data architecture Data pipelines Master Data Management Data quality Data platform development Business communication Python Data Quality

🔓 Log in to save this job, tailor your resume & track your apply process — 7 days free, no card needed.

Log in to add to target list

Summary ✨ AI‑Generated

An international technology organization is seeking a Senior Data Engineer to take technical ownership of its data platform, with a focus on Master Data Management and Data Quality. You will build scalable architectures and advanced processing pipelines, use SQL extensively, and translate complex data concepts into business language.

Highlights

Take technical responsibility for a modern data platform, build scalable data architectures and advanced processing pipelines, and work on Master Data Management and Data Quality in an international technology environment.

Description

W Comarch dbamy o to, aby dane stanowiły stabilny i bezpieczny krwioobieg organizacji. Żeby jednak mogły stać się fundamentem trafnych decyzji i nowoczesnych procesów, potrzebują technicznej doskonałości, sprawnej orkiestracji i najwyższej jakości. Dlatego, jeśli potrafisz budować skalowalne architektury danych, tworzyć zaawansowane potoki przetwarzania oraz przekładać zawiłe koncepty na język biznesu - szukamy właśnie Ciebie! Przechodzimy przez kluczowy etap transformacji cyfrowej i finansowej (projekt F1) i poszukujemy osoby na stanowisko Senior Data Engineer, która przejmie techniczną odpowiedzialność za rozwój naszej platformy danych (Data Hub) w obszarze Master Data Management (MDM) oraz Data Quality. Zrób kolejny krok w karierze i buduj nowoczesne środowisko danych od podstaw w międzynarodowej firmie technologicznej! Profil stanowiska Min. 4-5 lat komercyjnego doświadczenia na stanowisku Data EngineerBardzo dobra znajomość SQL (w tym funkcje analityczne, optymalizacja zapytań, projektowanie widoków i struktur tabelarycznych) oraz Pythona (przetwarzanie danych, biblioteki pandas/polars, integracje API)Praktyczna znajomość narzędzi orkiestracji danych (np. Apache Airflow) oraz doświadczenie w budowie hurtowni danych lub Data HubówDoświadczenie w obszarze MDM / Record Linkage (deduplikacja danych, silniki matchowania) lub silna motywacja do rozwoju w tym kierunkuZnajomość dobrych praktyk inżynierskich: kontrola wersji (Git), konteneryzacja (Docker), automatyzacja wdrożeń (CI/CD) oraz testy jednostkoweUmiejętność płynnej komunikacji i tłumaczenia zawiłych zagadnień technicznych na język biznesowyBiegła znajomość języka polskiego (ojczysty) oraz dobra znajomość języka angielskiego (min. B2) Twoje zadania Projektowanie i wdrażanie architektury warstw danych (staging, raw, golden record, presentation) w Data HubieTworzenie i automatyzacja potoków danych (ETL/ELT) z użyciem Apache Airflow, Spark, dbt oraz zaawansowanego SQLImplementacja i optymalizacja potoków tworzenia „Złotego Rekordu” (Golden Record) przy użyciu biblioteki Splink (Python) oraz reguł deterministycznych i probabilistycznychZarządzanie regułami scalania i pierwszeństwa danych (survivorship rules) dla klientów i dostawcówWdrażanie i obsługa frameworka Great Expectations do automatycznej walidacji jakości danychPrzejęcie repozytoriów kodu od dostawców zewnętrznych oraz ich standaryzacja in-house przy zachowaniu dobrych praktyk (Git, Docker, CI/CD) Dla Ciebie Udział w jednej z największych transformacji cyfrowych i procesowych w Polsce oraz decyzyjność w zakresie architektury data pipelines i orkiestracji danychDostęp do szkoleń wewnętrznych i zewnętrznych, udział w konferencjach branżowych, praca z nowoczesnymi technologiami i AI oraz jasna ścieżka awansu (np. w kierunku Lead Data Architect)Zaufanie, wysoki poziom autonomii i otwartość na eksperymenty oraz nowe pomysłyHybrydowy model pracy oraz elastyczne godziny rozpoczęcia pracySystem kafeteryjny - możesz wybrać pełne dofinansowanie do karty Multisport, przeznaczyć środki na kulturę, wypoczynek lub sport i zakupyDogodny dojazd - miejsca parkingowe dostępne dla wszystkich oraz pełne zaplecze dla osób dojeżdżających do pracy na rowerze