Data Engineer – Azure Databricks

W Cyclad współpracujemy z czołowymi firmami z branży IT, wspierając je w realizacji nowoczesnych projektów technologicznych.

Poszukujemy Data Engineera, który będzie rozwijać skalowalne rozwiązania danych w środowisku Microsoft Azure, wykorzystując Azure Databricks, Python, PySpark i Azure Data Factory.

Informacje o roli

• Praca: 100% zdalna
• Forma współpracy: B2B
• Stawka: do 130 PLN netto + VAT/h
• Poziom: Regular
• Język angielski: bardzo dobry
• Start: do ustalenia

Twoje zadania

• budowa i optymalizacja pipeline’ów danych oraz procesów ETL/ELT,
• przetwarzanie danych przy użyciu Pythona i PySpark,
• rozwijanie rozwiązań opartych na Azure Databricks, Data Factory i Azure Storage,
• wdrażanie testów automatycznych, kontroli jakości danych i monitoringu,
• udział w procesach CI/CD i automatyzacji wdrożeń,
• rozwiązywanie problemów z wydajnością i skalowalnością,
• współpraca z zespołami technicznymi i biznesowymi.

Czego oczekujemy?

• min. 2 lat doświadczenia z Microsoft Azure,
• praktycznej znajomości Azure Databricks, Azure Data Factory i Azure DevOps,
• bardzo dobrej znajomości Pythona i PySpark,
• dobrej znajomości SQL, modelowania danych i procesów ETL/ELT,
• doświadczenia z CI/CD, testami automatycznymi i TDD,
• znajomości zagadnień data quality, data governance i data integration,
• doświadczenia w pracy w środowisku DevOps i Agile/Scrum,
• bardzo dobrej znajomości języka angielskiego.

Mile widziane

• Infrastructure as Code,
• Azure Synapse Analytics,
• ServiceNow i procesy change/incident management,
• doświadczenie z hurtowniami danych lub Big Data.

Oferujemy

• 100% pracy zdalnej,
• stawkę do 130 PLN netto + VAT/h na B2B,
• długoterminową współpracę,
• międzynarodowy projekt wykorzystujący nowoczesne technologie Azure.