AWS Data Engineer

Dla naszego Partnera, realizującego globalny projekt transformacji chmurowej dla jednego z wiodących banków z Kanady, poszukujemy doświadczonej osoby na stanowisko AWS Data Engineer.Projekt ma charakter długofalowy i realizowany jest w środowisku międzynarodowym, we współpracy z zespołami z Europy oraz Kanady.Opis projektu:Projekt dotyczy rozwoju i modernizacji platformy danych w chmurze AWS dla globalnego banku z Kanady. Jego celem jest budowa skalowalnych, bezpiecznych i nowoczesnych rozwiązań 'data' wspierających analitykę, raportowanie oraz przetwarzanie danych w czasie rzeczywistym.Zakres obowiązków:Projektowanie, rozwój i utrzymanie rozwiązań danych w chmurze AWSBudowa oraz optymalizacja pipeline’ów danych (ETL / ELT)Praca z architekturą data lake i data warehousePrzetwarzanie danych batchowych oraz streamingowychWspółpraca z zespołami data, cloud oraz stakeholderami biznesowymiUdział w projektowaniu architektury oraz wyborze najlepszych rozwiązań technologicznychDbanie o jakość, bezpieczeństwo i wydajność przetwarzanych danych.Wymagania:Doświadczenie min., na poziomie samodzielnego Regular Data EngineeraDoświadczenie komercyjne na stanowisku Data Engineer, preferencyjnie w środowisku AWSBardzo dobra znajomość usług AWS: S3, Redshift, Glue, EMR, Lambda, Kinesis (lub podobnych)Doświadczenie w budowie pipeline’ów danych oraz workflowów ETL/ELTZnajomość PythonPraktyka z narzędziami orkiestracji (np. Airflow, AWS Step Functions)Dobra znajomość Spark oraz podstaw Kafka / streamingDoświadczenie z Infrastructure as Code (Terraform lub CloudFormation)Umiejętność modelowania danych (OLAP, ELT design)Język angielski na poziomie C1 (praca w środowisku międzynarodowym).Oferta:Kontrakt B2B z ShimiModel pracy: onsite – biuro w Warszawie lub GdańskuStawka: 160–180 PLN/h netto - możliwość negocjacjiDostępność kandydata: ASAP!Długofalowy projekt dla globalnego klienta z sektora bankowegoPraca w międzynarodowym środowisku i nowoczesnym stacku technologicznymPraca odbywa się w godzinach europejskich, z bezpośrednim managerem po stronie klienta w Kanadzie.Projekt jest już w toku, a zespół będzie rozbudowywany o kolejnych specjalistów.Benefity: dofinansowanie do karty medycznej i sportowej.