Skip to content
Apply now

This job is listed on several sites
Ideamotive

Spark / Data Lakehouse Developer

Ideamotive Show all offers
140 - 175 PLN
B2B
Remote
Mid
Wrocław
Expires Nov 21, 2026
1 day ago

In short

Spark/Data Lakehouse Developer (B2B/Full-Time/Remote) needed for Ideamotive in Wrocław. Responsibilities include designing data reconciliation solutions with MongoDB, synchronizing data, and building Data Lakehouse layers (Delta Lake, Apache Iceberg, Hudi). Requires 4+ years of experience with Apache Spark, PySpark, Spark-SQL, MongoDB, and Apache Iceberg.

Keywords

Apache Spark PySpark MongoDB Data Lakehouse Apache Iceberg CI/CD Prometheus Grafana Jira Confluence

AI-written summary based on the listing content.

Technologie, których używamy

O projekcie

Twój zakres obowiązków

  • Projektowanie i implementacja rozwiązań rekoncyliacji danych w warstwie ODS opartej o MongoDB.
  • Synchronizacja danych z systemami źródłowymi.
  • Budowa i utrzymanie warstw danych w architekturze Data Lakehouse (Delta Lake, Apache Iceberg, Hudi).
  • Przetwarzanie danych od warstwy surowej po warstwy prezentacyjne (curated, silver, gold).

Nasze wymagania

  • Minimum 4 lata komercyjnego doświadczenia w pracy z Apache Spark w środowiskach produkcyjnych.
  • Praktyczna znajomość PySpark, Spark-SQL, DataFrames oraz Structured Streaming.
  • Doświadczenie w pracy z MongoDB, w tym modelowanie dokumentowe, indeksowanie oraz użycie Spark Connector.
  • Praktyczna znajomość Apache Iceberg, zarządzanie tabelami wersjonowanymi oraz optymalizacja zapisów.
  • Znajomość narzędzi CI/CD, w szczególności Jenkins do automatyzacji wdrożeń.
  • Doświadczenie z narzędziami monitoringu takimi jak Prometheus i Grafana.
  • Znajomość metodyk zwinnych (Scrum, Kanban) oraz narzędzi Jira i Confluence.

Benefity

  • Jeśli po przeczytaniu tego ogłoszenia masz poczucie, że to rola, w której możesz realnie coś zbudować — bardzo możliwe, że właśnie Ciebie szukamy.
Published 2026-10-22
Source

Hexjobs App

Tools tailored to this listing.