Data Engineer

Technologie, których używamy

O projekcie

Twój zakres obowiązków

• uczestnictwo w projekcie dot. branży bankowej,
• projektowanie architektury i wdrażanie nowoczesnych systemów przetwarzania danych w obszarze Big Data,
• dbanie o wysoką jakość procesu rozwojowo-wdrożeniowego,
• dbanie o wysoką jakość dokumentacji technicznej,
• poszukiwanie nowych rozwiązań oraz ich implementację (R&D),
• współpraca z innymi zespołami w celu wsparcia developmentu,
• praca w modelu hybrydowym: 2 razy w miesiącu w biurze w Warszawie,
• stawka do 140 zł/h przy B2B w zależności od doświadczenia.

Nasze wymagania

• masz minimum 3 lata doświadczenia na stanowisku Big Data Developer,
• posiadasz wiedzę z zakresu Big Data, Hurtowni Danych i Zarządzania Danymi,
• masz minimum 2-3 lata doświadczenia w programowaniu procesów Spark w Pythonie (lub Scali),
• pracowałeś(-aś) z różnymi formatami danych: JSON, PARQUET, ORC, AVRO,
• rozumiesz typy baz danych i scenariusze ich użycia (np. Hive, Kudu, HBase),
• znasz SQL,
• masz doświadczenie w integracji danych z wielu źródeł.

Mile widziane

• posiadasz praktyczną znajomość procesów i narzędzi Agile (Jira, Confluence, Kanban, Scrum),
• stosujesz dobre praktyki przetwarzania dużych zbiorów danych, w tym standardy kodowania, dokumentowania, testowania i wdrażania,
• znasz platformę Kubeflow i masz praktyczne doświadczenie w automatyzacji CI/CD.

To oferujemy

• stabilną współpracę i różnorodne projekty (Software, Embedded, Data, Cloud Services),
• możliwość rozwoju kompetencji jako Ambasador Scalo - doskonal skille techniczne i presalesowe w społeczności naszych ekspertów, wpływaj na rozwój organizacji, wspieraj innych,
• przestrzeń do budowania marki osobistej - twórz wartościowe treści, dziel się wiedzą i doświadczeniem, występuj jako prelegent na wydarzeniach (np. ProMeet),
• prywatną opiekę medyczną - Luxmed,
• kafeteryjny system benefitów - Motivizer,
• dostęp do karty Multisport,
• program poleceń pracowniczych z nagrodami,
• integracje i wydarzenia firmowe.

Benefity