Expert Data Engineer (IT Developer)

Technologie, których używamy

O projekcie

Twój zakres obowiązków

• Projektowanie i budowa wysoko wydajnych, rozproszonych pipeline’ów Big Data
• Przetwarzanie, transformacja i wzbogacanie dużych zbiorów danych z wykorzystaniem Apache Spark
• Tworzenie rozwiązań wspierających analitykę danych, raportowanie i procesy decyzyjne
• Współpraca z zespołami analitycznymi oraz biznesem przy budowie modeli danych
• Utrzymanie i rozwój rozwiązań opartych o Hadoop i technologie Big Data
• Automatyzacja procesów przetwarzania danych
• Ścisła współpraca z zespołem QA i innymi zespołami technicznymi

Nasze wymagania

• Bardzo dobra znajomość: Scala, Apache Spark
• Doświadczenie w pracy z: Python
• Znajomość ekosystemu Hadoop: YARN, EMR, Sqoop, Hive, Oozie
• Bardzo dobra znajomość: SQL
• Praktyczne doświadczenie z systemami Linux
• Doświadczenie w pracy z chmurą: AWS
• Znajomość języka angielskiego umożliwiająca pracę w środowisku międzynarodowym

Mile widziane

• Doświadczenie w migracji danych z on-premise do chmury
• Praca w środowisku Agile / SAFe
• Doświadczenie z dużymi wolumenami danych i systemami czasu zbliżonego do rzeczywistego

Tak organizujemy naszą pracę

Tak pracujemy

To oferujemy

• Udział w projektach o dużej skali i realnym wpływie na biznes
• Pracę z nowoczesnym stackiem technologicznym (Scala, Spark, Python, AWS, Hadoop)
• Możliwość udziału w transformacji chmurowej dużej organizacji
• Elastyczny model pracy hybrydowej (ok. 1 dzień w tygodniu w biurze)
• Okazjonalne spotkania zespołowe w Trójmieście (PI Planning)

Benefity