Data Platform Engineer (K/M/N)

O projekcie

Twój zakres obowiązków

• projektowanie, budowanie i utrzymywanie niezawodnych potoków ETL/ELT, integrujących dane z różnych systemów źródłowych i baz danych z hurtownią danych (Data Warehouse);
• prowadzenie migracji istniejących potoków danych na nową platformę orkiestracji, z uwzględnieniem równoległego działania obu rozwiązań oraz bezpiecznego przełączenia na nową platformę;
• udział w wyborze i konfiguracji platformy orkiestracji we współpracy z zespołem IT (np. Apache Airflow, Azure Data Factory lub Microsoft Fabric);
• rozwijanie i optymalizacja hurtowni danych, w tym modelowanie danych, indeksowanie oraz dostrajanie wydajności;
• projektowanie i wdrażanie mechanizmów przechowywania historii zmian danych na potrzeby analizy trendów (np. Slowly Changing Dimensions, migawki danych (snapshots) lub Change Data Capture);
• wdrażanie kontroli wersji, przeglądu kodu oraz automatyzacji testów (CI/CD) dla kodu potoków danych w GitHub;
• implementacja mechanizmów kontroli jakości danych i reguł biznesowych oraz systemów monitorowania i alertowania dla produkcyjnych potoków danych (pipelines);
• budowanie i zarządzanie komponentami Microsoft Fabric, tam gdzie najlepiej odpowiadają potrzebom platformy (np. Lakehouse, pipelines);
• współpraca z osobami na stanowiskach BI Developer w celu utrzymania logiki transformacji bezpośrednio w hurtowni danych oraz optymalizacji modeli Power BI;
• dbanie o zgodność z dokumentacją, standardami data lineage i data governance oraz wspieranie kultury współodpowiedzialności (shared ownership) za platformę w zespole.

Nasze wymagania

• minimum 3 lata doświadczenia w obszarze Data Engineering, Data Warehousing lub rozwoju platform danych (Data Platform);
• bardzo dobra znajomość SQL w różnych systemach baz danych, poparta praktycznym doświadczeniem w pracy z Oracle i PostgreSQL;
• umiejętność skryptowania i programowania w celu automatyzacji przetwarzania danych (np. Python);
• doświadczenie w pracy z co najmniej jednym narzędziem do orkiestracji procesów danych, takim jak Apache Airflow, Azure Data Factory lub pipelines w Microsoft Fabric;
• praktyczna znajomość Microsoft Fabric, w tym komponentów Lakehouse, Data Factory Pipelines i Dataflows;
• doświadczenie w pracy z systemem Git, w tym praktyczna znajomość procesu Pull Request, automatyzacji testów oraz wdrażania procesów CI/CD dla potoków danych;
• dogłębne rozumienie modelowania wymiarowego (star/snowflake schemas) oraz technik śledzenia danych historycznych;
• doświadczenie we wdrażaniu mechanizmów kontroli jakości danych (data quality checks) oraz monitorowaniu produkcyjnych potoków danych;
• znajomość zagadnień związanych z zarządzaniem danymi (data governance), bezpieczeństwem informacji oraz standardami i wymogami zgodności (compliance);
• znajomość języka angielskiego na poziomie co najmniej B2, umożliwiająca swobodną komunikację w międzynarodowym środowisku pracy oraz korzystanie z dokumentacji technicznej;
• umiejętność jasnego komunikowania zagadnień technicznych i współpracy z innymi osobami;
• umiejętność efektywnej pracy zarówno samodzielnie, jak i w zespole oraz gotowość do dzielenia się wiedzą z zespołem BI;
• preferowane wykształcenie wyższe w obszarze IT lub pokrewnym.

Mile widziane

• znajomość SQL Server lub Azure SQL.

To oferujemy

• stabilne zatrudnienie w oparciu o umowę o pracę;
• pracę w zgranym i wspierającym się zespole, w środowisku międzynarodowym;
• elastyczne godziny rozpoczęcia pracy (6:15–8:30);
• prywatną opiekę medyczną;
• dofinansowanie karty Multisport;
• pakiet świadczeń socjalnych (m.in. dofinansowanie wypoczynku i świąt);
• możliwość przystąpienia do ubezpieczenia grupowego dla Ciebie i Twoich bliskich;
• program poleceń pracowniczych.

Benefity

Poznaj nas