Senior Data Engineer (AWS/PySpark) [M/F]

Arche Solutions Zobacz wszystkie oferty

Praca zdalna

1 dzień temu

W skrócie

Arche Solutions poszukuje Senior Data Engineera do zespołu rozwijającego platformę danych w AWS. Wymagane doświadczenie w PySpark, Redshift, S3, EMR, Glue, Lambda. Praca zdalna lub hybrydowa w Warszawie.

Słowa kluczowe

AWS Data Engineering PySpark Redshift S3 EMR Glue Lambda Airflow dbt

Skrót przygotowany przez AI na podstawie treści ogłoszenia.

Poszukujemy doświadczonego Senior Data Engineera, który dołączy do niewielkiego zespołu odpowiedzialnego za rozwój i utrzymanie nowoczesnej platformy danych działającej w środowisku AWS.

Platforma wykorzystuje m.in. Amazon Redshift, S3, EMR, PySpark, AWS Glue, Lambda, Step Functions, dbt oraz Airflow do przetwarzania, transformacji i udostępniania danych na potrzeby analityki biznesowej, raportowania oraz integracji z systemami produktowymi i marketingowymi.

Projekt obejmuje zarówno rozwój istniejącej infrastruktury danych, jak i zwiększanie jej niezawodności, optymalizację wydajności i kosztów oraz automatyzację procesów. Ważnym kierunkiem rozwoju jest również przygotowanie platformy do szerszego wykorzystania Machine Learning i AI, w tym budowania pipeline'ów danych dla modeli ML oraz wdrażania rozwiązań opartych na LLM.