Data Engineer (Azure Databricks + Python)

Kim jest H2B Group?

Jesteśmy firmą konsultingową, która pomaga klientom w automatyzacji procesów biznesowych przy pomocy AI, a specjalistom IT rozwijać karierę w modelu B2B. Oferujemy projekty z branż takich jak fintech, medtech, edutech czy automatyka przemysłowa. Dzięki ścisłej współpracy wspieramy rozwój naszych klientów poprzez dostarczanie szybkich i mierzalnych efektów, jednocześnie zapewniając specjalistom IT możliwości rozwoju kariery i zdobywania cennego doświadczenia.

Dlaczego warto z nami współpracować?✨ Elastyczność – Wybierasz projekty dopasowane do swoich umiejętności i zainteresowań, z możliwością zmiany w ramach naszej firmy lub grupy Euvic, której jesteśmy częścią.💡 Przejrzystość – Masz jasne zasady współpracy i pełną transparentność wynagrodzenia oraz warunków.🚀 Szybkość działania – Dzięki naszej efektywności szybko znajdziesz lub zmienisz projekt, który idealnie odpowiada Twoim kompetencjom.🌟 Możliwość rozwoju – Pracujesz przy innowacyjnych projektach, rozwijając kluczowe kompetencje i zdobywając cenne doświadczenie.

Do projektu naszego klienta poszukujemy Senior Data Engineera (Azure Databricks + Python)

Zakres obowiązków na tym stanowisku:

Projektowanie, rozwijanie i utrzymywanie wydajnych oraz skalowalnych aplikacji opartych na Apache Spark.

Tworzenie rozwiązań do przetwarzania, analizowania i transformacji dużych zbiorów danych.

Rozwijanie procesów oraz aplikacji data engineeringowych przy wykorzystaniu Pythona i Azure Databricks.

Definiowanie oraz egzekwowanie dobrych praktyk programistycznych i standardów kodowania w projekcie.

Przeprowadzanie code review i dbanie o jakość, czytelność oraz zgodność kodu z ustalonymi standardami.

Optymalizowanie kodu i procesów przetwarzania danych pod kątem wydajności, skalowalności i efektywnego wykorzystania zasobów.

Praca z formatami kolumnowymi, w szczególności Parquet, oraz tabelami Delta.

Identyfikowanie i rozwiązywanie problemów technicznych wpływających na stabilność oraz wydajność aplikacji.

Współpraca z zespołami technicznymi i biznesowymi przy dostarczaniu wysokiej jakości rozwiązań.

Jasne komunikowanie zadań i instrukcji członkom zespołu oraz wspieranie organizacji codziennej pracy.

Regularna komunikacja z klientem i pozostałymi interesariuszami projektu.

Samodzielne planowanie i realizowanie powierzonych zadań.

Tworzenie i aktualizowanie dokumentacji technicznej dotyczącej kodu, procesów oraz przepływów pracy.

Wymagania:

Minimum 5 lat komercyjnego doświadczenia w tworzeniu oprogramowania lub rozwiązaniach z obszaru data engineering.

Bardzo dobra znajomość Apache Spark.

Praktyczne doświadczenie z Azure Databricks i/lub Azure Synapse Analytics albo Microsoft Fabric.

Bardzo dobra znajomość języka Python.

Doświadczenie w przetwarzaniu i manipulowaniu danymi przy wykorzystaniu bibliotek takich jak Pandas, Polars lub podobnych.

Dobra znajomość kolumnowych formatów przechowywania danych, w szczególności Parquet.

Praktyczne doświadczenie w pracy z Delta Tables.

Doświadczenie w projektowaniu procesów przetwarzania, analizowania i transformowania danych.

Umiejętność tworzenia czystego, wydajnego, skalowalnego i łatwego w utrzymaniu kodu.

Doświadczenie w optymalizacji wydajności aplikacji oraz procesów przetwarzania danych.

Znajomość architektury mikroserwisowej i sposobów jej wykorzystania w skalowalnych systemach.

Doświadczenie z Dockerem i Kubernetesem.

Bardzo dobre zdolności analityczne i umiejętność rozwiązywania problemów.

Praktyczne i pragmatyczne podejście do pracy, pozwalające łączyć ustalone procesy z elastycznością potrzebną do realizacji celów projektu.

Bardzo dobra organizacja pracy, samodzielność oraz umiejętność ustalania priorytetów.

Umiejętność pracy pod presją czasu i realizowania zadań w wymagających terminach.

Bardzo dobre umiejętności komunikacyjne oraz doświadczenie w kontakcie z klientem.

Znajomość języka angielskiego na poziomie min. C1.

Co oferujemy?

Pracę zdalną – elastyczność, która pozwala pracować z każdego zakątka świata!

Ciekawe projekty – dobierane zgodnie z Twoimi umiejętnościami i zainteresowaniami, dające możliwość pracy nad innowacyjnymi rozwiązaniami.

Umowa B2B bez zapisu o wyłączności – współpracuj z nami na swoich zasadach.

Rozwój zawodowy – praca z najnowszymi technologiami i w zróżnicowanych projektach gwarantuje stały rozwój.