Senior Data Engineer

Polski Standard Płatności S.A.

Warszawa, Mokotów
hybrydowa
🐍 Python
🏠 hybrydowa

Wymagania

Technologie wymagane

Python

Nasze wymagania

  • Minimum 6 lat komercyjnego doświadczenia w programowaniu w języku Python lub Go
  • Doświadczenie w pracy z co najmniej jednym z narzędzi: Apache Airflow, Spark, Beam, NiFi, Flink
  • Biegłość w SQL (PostgreSQL) i NoSQL - key-value, dokumentowe, time-series oraz kolumnowe DWH
  • Pisanie kodu wg zasad Clean Code (np. "Meaningful Variable and Function Names", "Keep Functions and Methods Short.)
  • Doświadczenie z silnikami kolejek
  • Znajomość powszechnie stosowanych formatów, algorytmów i struktur danych

Mile widziane

  • Doświadczenie w pracy w chmurach publicznych (wykorzystujemy Google Cloud, natomiast jeśli znasz dobrze inną - na pewno dojdziemy do porozumienia)
  • Znajomość technologii CI/CD oraz IaC (Terraform, Ansible)

Twój zakres obowiązków

  • Praca przy tworzeniu globalnej platformy analitycznej w firmie, z myślą o skalowalności i kosztach.
  • Projektowanie i rozwój data pipeline'ów (batch, streaming).
  • Tworzenie i utrzymywanie kontraktów danych, testów i metryk jakości (freshness, completeness, accuracy).
  • Projektowanie algorytmów (deduplikacja, windowing, segmentacja) i struktur danych zoptymalizowanych dla tysięcy eventów na sekundę.
  • Zbieranie, analiza i synteza wymagań od zespołów produktowych, analityków i Data Science.
  • Propagowanie kultury data-driven w organizacji.
  • Tworzenie dokumentacji oraz proponowanie nowych rozwiązań i kierunków dalszego rozwoju.

Company

Wyświetlenia: 4
Opublikowana16 dni temu
Wygasaza 7 dni
Tryb pracyhybrydowa
Źródło
Logo
Logo

Podobne oferty, które mogą Cię zainteresować

Na podstawie "Senior Data Engineer"