Senior Data Engineer

Data Engineer, Microsoft Azure, Databricks, Lakehouse, Git, Jira, Confluence, Azure DevOps, Python, SQL
Hays IT Contracting to współpraca oparta na zasadach B2B. Nasza firma dopasowuje specjalistów IT do najciekawszych projektów technologicznych na rynku. Dołącz do grona 500 zadowolonych Kontraktorów i pracuj dla Klientów Hays!

Obecnie dla naszego Klienta poszukujemy Kandydatów na stanowisko:
Senior Data Engineer

Branża: farmaceutyczna
Lokalizacja: 100% zdalnie
Rodzaj pracy: umowa B2B pełen etat
Godziny pracy: godziny standardowe 40 godzin/tygodniowo
Czas trwania projektu: długofalowa współpraca; kontrakt minimum na rok
Zespół: międzynarodowe rozproszone zespoły, wstępnie 5 osób na zespół polski;
Start Date: ASAP
Technologie: Microsoft Azure (platforma chmurowa), Databricks, Delta Tables, Lakehouse, ETL i ELT (narzędzia i techniki integracji danych), Git, Jira, Confluence, Azure DevOps, Python, SQL czy inne skrypty, Power BI;

Business Intelligence - dodawanie insightów do szerszej strategii BI.
Integracja transformacji danych w Pythonie z Power BI oraz ich przenoszenie do chmury.

Doświadczenie i umiejętności:
  • Znajomość platformy Microsoft Azure i usług chmurowych.
  • Doświadczenie w projektowaniu, budowaniu i wdrażaniu potoków danych w chmurze, w celu pobierania danych z różnych źródeł, takich jak bazy danych, API lub platformy strumieniowe.
  • Biegłość w systemach zarządzania bazami danych. Kandydat powinien być w stanie projektować, konfigurować i zarządzać strukturami danych.
  • Umiejętności programowania (Python, SQL, inne skrypty).
  • Biegłość w optymalizacji ETL danych. Znajomość optymalizacji zapytań, indeksowania i strojenia wydajności jest niezbędna do efektywnego pobierania i przetwarzania danych.
  • Znajomość co najmniej jednego narzędzia do orkiestracji i harmonogramowania (Airflow lub ADF).


Obowiązki:
  • Pisanie wydajnego i skalowalnego kodu do przetwarzania, transformacji i czyszczenia dużych ilości danych strukturalnych i niestrukturalnych.
  • Budowanie potoków danych do pobierania danych z różnych źródeł, takich jak bazy danych, API lub platformy strumieniowe (Databricks, Delta Tables, Lakehouse).
  • Integracja i transformacja danych w celu zapewnienia ich zgodności z docelowym modelem danych lub formatem.
  • Modelowanie danych z różnych źródeł i technologii. Rozwiązywanie i wspieranie najbardziej złożonych i mających największy wpływ problemów, aby dostarczać nowe funkcje i funkcjonalności.
  • Projektowanie i optymalizacja architektury przechowywania danych, w tym jezior danych, hurtowni danych lub rozproszonych systemów plików.
  • Identyfikowanie i rozwiązywanie problemów związanych z przetwarzaniem danych, przechowywaniem lub infrastrukturą. Monitorowanie wydajności systemu, identyfikowanie anomalii i przeprowadzanie analizy przyczyn źródłowych w celu zapewnienia płynnych i nieprzerwanych operacji danych.
  • Kandydat powinien być w stanie integrować dane z wielu źródeł i przekształcać je w format odpowiedni do analizy.
  • Dzielenie się wiedzą, udzielanie wsparcia i mentoring członkom zespołu.
  • Doświadczenie w pracy w metodykach zwinnych – narzędzia wspierające (JIRA, Azure DevOps).


Co otrzymasz:
  • Błyskawiczny proces rekrutacyjny;
  • Standardowe benefity – preferencyjne stawki pakietów LuxMed i Multisport;
  • Decydując się na współpracę via Hays, otrzymujesz również możliwość pracy w przyszłości dla wielu innych wiodących klientów Hays;


Jak będzie wyglądał proces rekrutacyjny:
  • Rozmowa techniczna z Klientem – spotkanie online (1h); max 2 spotkania;
  • Oferta;
  • Witamy w projekcie !

Jeśli oferta jest dla Ciebie interesująca — aplikuj!

Hays Poland sp. z o.o. jest agencją zatrudnienia zarejestrowaną w rejestrze prowadzonym przez Marszałka Województwa Mazowieckiego pod numerem 361.

#LI-DNI
Click here to access HAYS Privacy Policy, which provides detailed information on how we use and protect your personal information, and your rights in relation to this.

Summary

Job Type
Contract
Industry
Pharmaceuticals
Location
Polska
Specialism
Software Development
Ref:
1190152

Similar jobs to Senior Data Engineer

  • Senior Full-Stack Engineer (Java + Angular)

    Java, Microservices, contract of employment (20 000–31 000 PLN gross), remote work
    Warszawa20 000 - 31 000 PLN gross/month
  • Site Reliability Engineer - Hadoop

    SRE, Hadoop, Big Data, Site Reliability Engineer
    Warszawa
  • Senior Software Development Engineer (React and Java)

    Senior Software Development Engineer, Senior Java Developer, Full-Stack Engineer, Java, React, TypeScript,
    KrakówB2B
  • Senior DevOps Engineer

    DevOps, AWS, Terraform, Jenkins, CI/CD, Tech Lead
    Warszawa
  • DevOps

    DevOps, Cloud Engineer, CI/CD, Docker, Kubernetes, Openshift, Terraform, Terragrunt, Cloud, GitOps,
    Kraków