Senior Data Engineer @ AVENGA (Agencja Pracy, nr KRAZ: 8448)
(práce v Polsku)

Senior Data Engineer @ AVENGA (Agencja Pracy, nr KRAZ: 8448)

Oczekiwany profil:

• Doświadczenie w pracy na stanowisku Data Engineera (minimum 5 lat).

• Bardzo dobra znajomość środowiska Microsoft Azure, w tym: Azure Databricks (Spark) Azure Data Factory (orkiestracja przepływów danych) Azure Data Storage / Delta Lake Azure DevOps (CI/CD, zarządzanie uprawnieniami, automatyzacja).

• Umiejętność projektowania i wdrażania rozwiązań chmurowych dla zaawansowanych analiz i obliczeń.

• Gotowość do pełnienia także roli wspierającej testowanie rozwiązań.

• Umiejętność pracy zespołowej i komunikatywność.

• Doświadczenie z obszaru Machine Learning, MLOps i MLflow.

• Praktyczne doświadczenie z narzędziami i technologiami takimi jak: Python, Terraform, YAML, Parquet, Git, PowerShell, Azure CLI.

• Znajomość dobrych praktyk związanych z przetwarzaniem danych i optymalizacją pipeline’ów.

Główne zadania:

• Projektowanie, budowa i utrzymanie rozwiązań do przetwarzania danych w chmurze Microsoft Azure.

• Przetwarzanie danych w Azure Databricks z użyciem Apache Spark.

• Orkiestracja procesów danych w Azure Data Factory.

• Automatyzacja wdrożeń oraz konfiguracja środowisk z wykorzystaniem Azure DevOps (CI/CD pipelines), Terraform, YAML, Azure CLI.

• Wsparcie zespołów biznesowych poprzez testowanie rozwiązań i walidację danych.

• Praca z danymi w czasie rzeczywistym (real-time streaming).

Kategorie

data

Zajímavé nabídky práce v okolí: