Inżynier Danych w Decerto

13 hours ago


Remote Warsaw Gdańsk Wrocław Kielce, Czech Republic Decerto Full time
Spis treści
  • Spis zadań
  • Projekt: Projektowanie i wdrażanie end-to-end data pipelines w Azure DataBricks
  • Wykształcenia, kwalifikacje i umiejętności
  • Benefty pracy w Decerto
Spis zadań
  • Projektowanie i wdrażanie end-to-end data pipelines w Azure DataBricks.
  • Pozyskiwanie danych z różnych źródeł.
  • Publikacja danych w Azure Data Lake.
  • Tworzenie kodu w Spark SQL i PySpark do transformacji danych.
  • Automatyzacja pipeline orchestration za pomocą Databricks Workflows i integracja z zewnętrznymi narzędziami (np. Apache Airflow, Azure Data Factory).
  • Wykorzystanie funkcji Databricks, takich jak Delta Lake, do zarządzania i śledzenia zmian w danych.
  • Tworzenie skalowalnych procesów pozyskiwania danych w celu obsługi danych z różnych źróceł (API, bazy danych, systemy plików).
  • Wdrażanie i utrzymywanie zasad zarządzania danymi przy użyciu Unity Catalog, zapewniając odpowiednią organizację, kontrolę dostępu i zarządzanie metadanymi w zasobach danych.
Projekt: Projektowanie i wdrażanie end-to-end data pipelines w Azure DataBricks

Klient jest globalną firmą ubezpieczeniową oferującą m.in. ubezpieczenia majątkowe i osobowe. Posiada oddziały na całym świecie i ponad 50-letnie doświadczenie w underwritingu oraz zarządzaniu kapitałem i ryzykiem.

Poszukujemy Inżyniera Danych z doświadczeniem w środowisku cloudowym z naciskiem na Azure i DataBricks.

Wiodące technologie i narzędzia to:

  • ETL data pipelines w DataBricks,
  • Spark (SQL, PySpark),
  • Azure Services; Azure Data Lake, Azure Blob Storage, Azure Synapse,
  • Databricks Unity Catalog,
  • Databricks Workflows,
  • Azure Data Factory.
Wykształcenia, kwalifikacje i umiejętności
  • Doświadczenie w środowisku cloudowym z naciskiem na Azure i DataBricks.
  • Wiedza o technologiach ETL i data pipelines.
  • Umiejętność projektowania i wdrażania end-to-end data pipelines w Azure DataBricks.
  • Umiejętność automatyzacji pipeline orchestration za pomocą Databricks Workflows i integracja z zewnętrznymi narzędziami.
  • Wiedza o funkcjach Databricks, takich jak Delta Lake, do zarządzania i śledzenia zmian w danych.
  • Umiejętność tworzenia skalowalnych procesów pozyskiwania danych w celu obsługi danych z różnych źróceł.
  • Wiedza o zasadach zarządzania danymi przy użyciu Unity Catalog.
Benefty pracy w Decerto
  • Praca zdalna, okazjonalne przyjazdy do biura w Warszawie.
  • Struktura płaska i doraźny wpływ na działania firmy.
  • Moderny biuro, startupowa atmosfera i wiele innych korzyści


  • Remote, Warszawa, Czech Republic Link Group Full time

    Link Group - Szukamy Inżyniera DanychKluczowe umiejętności i obowiązki Inżyniera Danych:Projektowanie i implementacja pipelineów danych do systemu SAP.Odpowiedzialność za mapowanie i migrację danych.Pobieranie informacji od analityków i biznesu.Najważniejsze wymagania:Doświadczenie w obszarze SQL, Data Engineering, SAP.Wymagania ogólne:Minimum 5...


  • Remote, Warszawa, Czech Republic XTB Full time

    Chcesz pracować jako kierownik hurtowni danych w XTB? Szukamy doświadczonego Data Engineer'a, który zaoferuje nam wsparcie w realizacji kluczowych zadań biznesowych. Zapewniamy stabilne wynagrodzenie w wysokości około 80-120 tysięcy złotych rocznie.O naszej firmieXTB jest międzynarodową firmą otronizacyjną, która oferuje szeroki zakres...


  • Remote, Czech Republic Scalo Full time

    Przedstawiamy Scalo, firma oferująca szerokie zakres usług związanymi z rozwojem oprogramowania, a także nowoczesne technologie platformy chmurowej.Oferta pracy:Specjalista ds. Wyświetlania Danych w Power BIOpis stanowiska:Poszukujemy doświadczonego specjalisty ds. wyświetlania danych w Power BI, który potrafi projektować i implementować...


  • Wrocław, Województwo dolnośląskie, Czech Republic Blurify Full time

    Opis stanowiskaZachęcamy osoby z doświadczeniem w tworzeniu aplikacji webowych po stronie frontendu do przyłączenia się do naszego zespołu. Chcielibyśmy, aby nowi członkowie naszej drużyny mieli aktywne podejście do pracy i były otwarci na rozwój. Co możemy dla Ciebie oferować?Pracę w środowisku Agile i rozwoju aplikacji mobilnych i...


  • Remote, Czech Republic apreel Sp. z o.o. Full time

    Opis stanowiska">Dołącz do naszego zespołu i uczestnicz w transformacji danych.Zaplanuj rozwiązania współpracy zespołowej na potrzeby migracji danych do chmury.Uporządkuj świat danych oraz zaplanuj efektywne przepływy danych.Wymagania">Co najmniej 5 lat doświadczenia jako Data Engineer.Wiadomość o kluczowych kompetencjach popartych certyfikatami...


  • Remote, Warszawa, Czech Republic XTB Full time

    XTB - to innowacyjna firma technologiczna, która oferuje nowoczesne rozwiązania finansowe na całym świecie. W naszym zespole pracują z pasją ludzie, którzy stwarzają wartość dla naszych klientów i dzięki temu kształtujemy przyszłość finansów.O co chodzi w pracy Specjalisty ds. Systemów Bazy Danych?Jesteśmy poszukiwani przez doświadczonego...


  • Remote, Warszawa, Czech Republic Scalo Full time

    Współpracujemy z ciekawymi ludźmi.">Katgoria: Data Engineer @ ScaloO nas:">Scalo to firma, która szuka ludzi o dużej pasji do rozwoju i pracy na najnowszych technologiach. Zakres naszego działania obejmuje wiele obszarów, takich jak programowanie procesów Spark w Pythonie lub Scali, zarządzanie danymi oraz integracja danych z wielu źródeł.Co dla...


  • Gdańsk, Pomerania, Czech Republic ITFS Sp. z o.o. Full time

    Opis StanowiskaZapraszamy do współpracy Specjalistę ds. Rozwiązań Technologicznych, który będzie odpowiedzialny za projektowanie i implementację aplikacji webowych oraz utrzymanie ich funkcjonalności.Oto nasze wymagania:Doświadczenie: Min. 5-letnie doświadczenie zawodowe w tworzeniu aplikacji webowych.Umiejętności techniczne: Dobra znajomość...


  • Remote, Kraków, Czech Republic Scalo Full time

    Przedstawiamy ofertę idealną dla kogoś, kto:posiada minimum 10 lat doświadczenia w programowaniu w C++,ma pasję do projektowania wysokiej jakości rozwiązań,ma udokumentowane doświadczenie jako Architekt Techniczny,ma doświadczenie w zarządzaniu projektami i architekturze zorientowanej na usługi,znajomość różnych systemów operacyjnych (np....


  • Gdańsk, Pomerania, Czech Republic TMS Personal Full time

    Pracujemy w TMS Personal, świadczącym nowoczesne usługi HR dla biznesu. Naszym celem jest wspieranie klientów w efektywnym zarządzaniu zasobami ludzkimi poprzez dostarczanie innowacyjnych rozwiązań personalnych.Jesteśmy firmą dynamiczną, dbającą o rozwój swoich pracowników oraz oferującą elastyczny czas pracy. Szukamy osoby samodzielnej i...


  • Remote, Warszawa, Czech Republic Softwarely Full time

    Nasze potrzeby:Posiadamy bardzo dynamicznie rozwijający się zespółWymagamy doświadczenia w programowaniu oprogramowania na poziomie aplikacjiZależy nam na nauce i rozwojuOczekiwane kompetencje kandydata:Mimo 3 lat pracy jako deweloperem, posiadasz praktyczną znajomość technicznych umiejętności, takich jakzarządzanie bazami danych relacyjnymi oraz...


  • Remote, Czech Republic AVENGA Full time

    Informacje o firmie">AVENGA działa na rynku przez wiele lat.">Opis stanowiska pracy">Poszukujemy specjalisty do realizacji zadań w ramach rozwoju produktu opartego na danych big.">Wymagania i kwalifikacje">Nasz idealny kandydat powinien mieć umiejętności w następujących obszarach:">- programowanie w językach Java, Kotlin">- technologii MONGO, SQL">-...


  • Remote, Warszawa, Czech Republic 7N Full time

    Opis StanowiskaPoszukujemy doświadczonego Specjalisty ds. Danych, który pełni rolę kierownika projektu w ramach naszej firmy 7N.Osoba na tym stanowisku odpowiedzialna będzie za budowanie i utrzymanie rozproszonych systemów o dużej skali oraz jakości. Aplikacje będą implementowane głównie z wykorzystaniem Pythona, z mniejszym użyciem C#.Zadania...


  • Remote, Wrocław, Czech Republic KRUK S.A. Full time

    KURUK S.A. to firma, która łączy pasję z innowacyjnymi rozwiązaniami. Pracujemy w oparciu o najnowsze technologie i staramy się być liderem na rynku windykacji.Nasze wyzwania:Posiadamy bardzo dobre zrozumienie C# oraz .NET 6+Posiadamy doskonałą znajomość ASP.NET Core Web API, REST oraz GITUczestniczymy w pełni we wszystkich fazach cyklu...


  • Remote, Warszawa, Czech Republic 7N Full time

    Podstawowymi wymaganiami zawodowymi jest doświadczenie na podobnym stanowisku co najmniej przez 3 lata. Preferowanym scenariuszem jest też doświadczenie we wdrażaniu Microsoft Dynamics 365, zwłaszcza migracji z Dynamics Ax w firmach działających na polskim rynku.">Wymagana jest znajomość wybranych modułów D365 (Finanse, Budżetowanie, Środki...


  • Kielce, Lublin, Białystok, Czech Republic Britenet Full time

    Przedstawiamy naszą propozycję pracy">Chcesz rozpocząć swoją karierę zawodową w technologii Salesforce? Cieszysz się solidnymi podstawami wiedzy programistycznej i chęcią do dalszej intensywnej nauki?">Dołączaj do naszego zespołu jako programista Salesforce, który pomaga będziesz rozwijać atrakcyjne projekty dla klientów na całym...


  • Remote, Katowice, Czech Republic Alerabat Sp. z o.o. Full time

    Przedstawiamy Alerabat Sp. z o.o.">">Alerabat Sp. z o.o. - lider na rynku cashbackowych i kodów rabatowych w Polsce. Naszymi produktami korzysta ponad 3 miliony użytkowników, a obecnie poszukujemy dwóch doświadczonych Inżynierów Full-Stack.">">Oto Twoje obowiązki:">Projektowanie i implementacja skalowalnych rozwiązań backend'owych w...


  • Wrocław, Województwo dolnośląskie, Czech Republic Veritas Group Full time

    Nasza firma, Grupa Veritas, jest połączeniem kilku spółek tworzących silną grupę pod szyldem holdingu.Na co dzień dostarczamy profesjonalne usługi na różnych płaszczyznach: księgowości, zarządzania zasobami ludzkimi, rekrutacji stałych i działaniach charytatywnych.Zapewniamy codzienną współpracę z 330 kreatywnymi i zaangażowanymi...


  • Wrocław, Województwo dolnośląskie, Czech Republic Antal Full time

    **Oto przedmiot naszej poszukiwania:**">Nasz klient, znana firma produkcyjno-handlowa z branży o dużej renomie, prowadzi wyszukiwanie kompetentnego specjalisty ds. kontrolingu zarządczego.Z pewnością większość Waszych współpracowników wie już, jak ważne jest dla spółki dbanie o efektywność i racjonalność podjętych decyzji biznesowych....


  • Remote, Czech Republic Connectis_ Full time

    Poszukujemy: doświadczonego Inżyniera Infrastruktury Chmurowej do współpracy w projekcie IPCEI Next Generation Cloud Infrastructure and Services (IPCEI CIS). Osoba powinna mieć umiejętność konfiguracji i utrzymania usług oraz serwerów wspierających działanie platformy chmurowej. Do zadań należy również monitorowanie, optymalizacja wydajności...