Senior Data Engineer (AI/LLM)

DS STREAM Zobacz wszystkie oferty

Praca zdalna

1 miesiąc temu

W skrócie

Senior Data Engineer (AI/LLM) zdalnie w Polsce. Budowanie ekosystemu danych dla LLM/RAG w multicloud (Azure/GCP). Wymagane doświadczenie w Databricks, Vertex AI, Spark, RAG, LLM.

Słowa kluczowe

Data Engineering AI LLM RAG Azure GCP Databricks Vertex AI Spark

Skrót przygotowany przez AI na podstawie treści ogłoszenia.

[zdalnie] Senior Data Engineer LLM & RAG

🚀 Rozwijamy nasz zespół AI Data Engineering w DS STREAM!

Poszukujemy Senior Data Engineera, który dołączy do naszego zespołu i będzie rozwijał nowoczesne rozwiązania chmurowe zasilające systemy Generative AI, duże modele językowe (LLM) oraz architektury RAG (Retrieval-Augmented Generation).

📍 Praca w 100% zdalna na terenie Polski (z możliwością korzystania z biura w Warszawie).

O projekcie Dołączysz do projektu budującego zaawansowany ekosystem danych w środowisku multicloud (Azure oraz GCP), który stanowi fundament dla produkcyjnych wdrożeń LLM/RAG i wyszukiwania kontekstowego.

Środowisko wykorzystuje m.in. Azure Databricks, GCP Vertex AI (Vector Search), Unity Catalog, Spark Structured Streaming oraz Databricks, zapewniając wysoką wydajność, bezpieczeństwo i skuteczne zarządzanie danymi. Architektura rozwiązania oparta jest na modelu Medallion Architecture, połączonym z nowoczesnym przetwarzaniem danych niestrukturyzowanych (chunking, embeddingi) oraz orkiestracją LLM (LangChain / LlamaIndex).