Wymagania

Technologie wymagane

Spark

Python

Scala

Hive

Kudu

HBase

SQL

Technologie mile widziane

Jira

Confluence

Kubeflow

Nasze wymagania

• masz co najmniej 3-4 lata doświadczenia w branży IT,
• posiadasz wiedzę z zakresu Big Data, Hurtowni Danych i Zarządzania Danymi,
• masz minimum 2-3 lata doświadczenia w programowaniu procesów Spark w Pythonie (lub Scali),
• pracowałeś(-aś) z różnymi formatami danych: JSON, PARQUET, ORC, AVRO,
• rozumiesz typy baz danych i scenariusze ich użycia (np. Hive, Kudu, HBase),
• znasz SQL,
• masz doświadczenie w integracji danych z wielu źródeł.

Mile widziane

• posiadasz praktyczną znajomość procesów i narzędzi Agile (Jira, Confluence, Kanban, Scrum),
• stosujesz dobre praktyki przetwarzania dużych zbiorów danych, w tym standardy kodowania, dokumentowania, testowania i wdrażania,
• znasz platformę Kubeflow i masz praktyczne doświadczenie w automatyzacji CI/CD.

Twój zakres obowiązków

• uczestnictwo w projekcie dot. branży bankowej,
• projektowanie architektury i wdrażanie nowoczesnych systemów przetwarzania danych w obszarze Big Data,
• dbanie o wysoką jakość procesu rozwojowo-wdrożeniowego,
• dbanie o wysoką jakość dokumentacji technicznej,
• poszukiwanie nowych rozwiązań oraz ich implementację (R&D),
• współpraca z innymi zespołami w celu wsparcia developmentu,
• praca w modelu hybrydowym: 2 dni w miesiącu praca w biurze w Warszawie,
• stawka do 135 zł/h przy B2B w zależności od doświadczenia.