Expert Data Engineer
B2B.NET S.A.
120 - 150 PLN / HOUR
Warszawa
Gdynia
Łódź
Gdańsk
Gdynia, Pomeranian
Warszawa, Masovian
Gdańsk, Pomeranian
Hybrydowa
B2B
Big Data
ETL
Data Testing
SQL
Hadoop
Python
Scala
Spark
Spark SQL
Status
Hexjobs Insights
Stanowisko: Expert Data Engineer. Odpowiedzialności: budowanie pipeline'ów Big Data, automatyzacja procesów, współpraca z analitykami. Wymagania: umiejętność obsługi technologii Big Data, SQL, Python, Scala, Spark.
Słowa kluczowe
Big Data
ETL
Data Testing
SQL
Hadoop
Python
Scala
Spark
Spark SQL
Technologies we use
Your responsibilities
- Building distributed and highly parallelized Big data processing pipeline which process massive amount of data (both structured and unstructured data) in near real-time
- Leveraging Spark to enrich and transform corporate data to enable searching, data visualization, and advanced analytics
- Working closely with analysts and business stakeholders to develop analytics models
- Continuous delivering on Hadoop and other Big Data Platforms
- Automating processes where possible and are repeatable and reliable
- Working closely with QA team
Our requirements
- Big Data
- ETL
- Data Testing
- SQL
- Hadoop stack: YARN, EMR, Sqoop, Hive, Oozie
- Hive, Oozie
- Python
- Scala
- Spark and Spark SQL
Benefits
Zaloguj się, aby zobaczyć pełne szczegóły
Utwórz darmowe konto, aby uzyskać dostęp do pełnego opisu oferty i zaaplikować.
Wyświetlenia: 3
| Opublikowana | 7 dni temu |
| Wygasa | za 23 dni |
| Rodzaj umowy | B2B |
| Tryb pracy | Hybrydowa |
| Źródło |   |
Podobne oferty, które mogą Cię zainteresować
Na podstawie "Expert Data Engineer"
Nie znaleziono ofert, spróbuj zmienić kryteria wyszukiwania.