
Cloud Data Architect
Devire
Praca zdalna
Databricks
Snowflake
Delta Lake
AWS
S3
SQL
Parquet
Data Lake
pipeline'y danych
migracja danych
Status
Hexjobs Insights
Stanowisko: Cloud Data Architect. Odpowiedzialność: migracja danych do Databricks, projektowanie pipeline'ów i architektury. Wymagana znajomość Databricks, Snowflake, AWS, SQL.
Słowa kluczowe
Databricks
Snowflake
Delta Lake
AWS
S3
SQL
Parquet
Data Lake
pipeline'y danych
migracja danych
Benefity
- Wynagrodzenie w oparciu o umowę B2B (200-220zł/h netto)
- Współpraca 100% zdalna
- Pakiet benefitów (opieka medyczna, członkostwo sportowe)
- Długoterminowa współpraca
Co oferujemy
- Wynagrodzenie w oparciu o umowę B2B (via Devire) - 200-220zł/h netto.
- Współpraca 100% zdalna.
- Pakiet benefitów (opieka medyczna, członkostwo sportowe itp.).
- Długoterminowa współpraca.
Wymagania
- Ekspercka znajomość Databricks.
- Zaawansowane, praktyczne doświadczenie w pracy z Snowflake.
- Doświadczenie z Delta Lake – wdrażanie, optymalizacja oraz wykorzystanie na dużą skalę.
- Praktyka w projektowaniu i utrzymaniu pipeline’ów danych w środowisku AWS (w tym S3).
- Znajomość formatów Parquet oraz architektur Data Lake.
- Zaawansowane umiejętności SQL, w tym optymalizacja zapytań.
- Silne doświadczenie w realizacji migracji danych na dużą skalę.
- Doświadczenie w projektowaniu architektury danych.
- Doświadczenie w realizacji projektów end-to-end w środowiskach danych na dużą skalę.
- Umiejętność prowadzenia dyskusji architektonicznych (challenge, validate, co-create)
- Wysoka samodzielność oraz gotowość do natychmiastowego rozpoczęcia współpracy.
- Znajomość języka angielskiego na poziomie min. B2+.
Mile widziane:
- Doświadczenie w integracjach z systemami takimi jak: HubSpot, Jira, systemy księgowe.
- Znajomość Power BI w zakresie modelowania danych na potrzeby raportowania.
Obowiązki
- Zapewnienie technicznego przywództwa w migracji wielopetabajtowych zbiorów danych do Databricks na AWS.
- Projektowanie oraz nadzór nad wdrożeniem formatu Delta Lake z obsługą Delta Sharing.
- Przegląd i kwestionowanie strategii oraz roadmapy klienta, wraz z rekomendowaniem usprawnień.
- Projektowanie pipeline’ów przetwarzania danych oraz logiki konwersji z Parquet / Snowflake do Delta Lake.
- Wsparcie merytoryczne i mentoring dla wewnętrznych Data Engineerów.
- Współtworzenie architektury Modern Data Warehouse oraz Data Lakehouse (Delta Lake).
- Wsparcie inicjatywy raportowej poprzez zapewnienie wysokiej jakości danych dla zespołu Power BI.
Wyświetlenia: 14
| Opublikowana | 27 dni temu |
| Wygasa | za 3 dni |
| Źródło |
Podobne oferty, które mogą Cię zainteresować
Na podstawie "Cloud Data Architect"
Nie znaleziono ofert, spróbuj zmienić kryteria wyszukiwania.