Data Engineer @ Devire
6 days ago
1. Platformy Chmurowe: Google Cloud Platform (GCP): Znajomość kluczowych usług Data & Analytics BigQuery: Wykorzystanie do przechowywania, przetwarzania i analizydanych (Bronze, Silver, Gold layers) Cloud Storage: Zarządzanie danymi w różnych formatach (Parquet, JSON, CSV) i klasach przechowywania Cloud Dataflow (Apache Beam): Projektowanie, implementacja i optymalizacja potoków ETL/ELT (zarówno batch, jak i streaming) w Pythonie. Cloud Composer (Apache Airflow): Tworzenie i zarządzanie DAGami do orkiestracji złożonych przepływów danych, monitorowanie zadań. Datastream: Zrozumienie mechanizmów CDC (Change Data Capture) i replikacji danych (z MySQL do BigQuery). 2. Języki Programowania: Python (Pandas) oraz SQL (ANSI SQL, dialekt BigQuery) 3. Bazy Danych: MySQL, PostgreSQL, MS SQL Server 4. Koncepcje i Metodologie: Architektura Medalionowa (Bronze, Silver, Gold) ETL/ELT: Zrozumienie procesów ekstrakcji, transformacji i ładowania danych. Data Governance: Zrozumienie zasad zarządzania jakością danych, bezpieczeństwa danych, prywatności i zgodności (RODO). Deduplikacja Danych oraz Wersjonowanie Danych (Data Versioning). 5. Narzędzia i Procesy Deweloperskie: Git oraz CI/CD. Devire Outsourcing IT to forma współpracy dedykowana dla specjalistów z branży IT, oparta na zasadach własnej działalności gospodarczej - B2B, realizująca projekty dla Klientów prowadzących innowacyjne i nowoczesne projekty. Dla naszego Klienta z sektora energetycznego poszukujemy Data Engineer'a, który będzie odpowiedzialny za wsparcie zespołu projektowego oraz utrzymaniowego w zadaniach związanych z budową, rozwojem i utrzymaniem platformy CDP w technologii Data Lakehouse (GCP). Kontrakt B2B via Devire. Współpraca hybrydowa z biura w Warszawie (2-3 dni w tygodniu) Pakiet benefitów. ,[Projektowanie, implementacja i optymalizacja procesów przetwarzania danych w architekturze Data Lakehouse na platformie Google Cloud Platform (GCP)., Wspieranie zespołów projektowych i utrzymaniowych w budowie oraz rozwoju platformy Customer Data Platform (CDP)., Wspieranie zespołów projektowych i utrzymaniowych w budowie oraz rozwoju platformy Customer Data Platform (CDP)., Współpraca z analitykami, data scientistami i innymi interesariuszami w zakresie integracji oraz udostępniania danych., Tworzenie i aktualizacja dokumentacji technicznej oraz dobrych praktyk w zakresie inżynierii danych w środowisku GCP.] Requirements: Google Cloud Platform, Cloud, R, JSON, CSV, Apache Beam, ETL, Python, Apache Airflow, MySQL, BigQuery, pandas, SQL, ANSI, PostgreSQL, MS SQL Server, Git
-
Java Developer/Data Engineer @ Devire
1 week ago
Warszawa, Czech Republic Devire Full timeBackground as a Java Senior Developer who transitioned into Data Engineering. Solid understanding of data engineering principles and Big Data processing. Hands-on experience with Scala and Apache Spark. Experience with software development. Familiarity with CI/CD pipelines, code quality monitoring, and cloud environments (preferably Azure). ...
-
Data & AI Security Engineer @ Devire
1 week ago
Remote, Warszawa, Czech Republic Devire Full timeStrong understanding of data security principles, cryptography, and privacy-enhancing technologies. Experience with securing AI/ML environments, including MLOps platforms and model registries. Familiarity with cloud security (Azure, AWS, GCP) and data protection tools (e.g., DLP, CASB). Knowledge of AI-specific threats and mitigation techniques (e.g.,...
-
DevOps Engineer @ Devire
1 week ago
Warszawa, Czech Republic Devire Full timeYou’ll work closely with developers, business analysts, and operations specialists, taking ownership of CI/CD processes, automation, and application support in a global environment 70% DevOps and 30% Ops activities. Building, maintaining, and improving CI/CD pipelines and deployment processes. Collaborating with international teams in Poland, France, and...
-
AI Engineer @ Devire
9 hours ago
Warszawa, Czech Republic Devire Full timeDoświadczenie w stosowaniu narzędzi i praktyk DevOps oraz implementacji procesów CI/CD Doświadczenie w zarządzaniu infrastrukturą w modelu IaC oraz budowie rozwiązań z wykorzystaniem usług chmurowych (preferowane GCP) Umiejętność programowania w Pythonie Umiejętność analizy kodu źródłowego bez jego uruchamiania Umiejętność analizy...
-
Inżynier Danych @ Devire
1 week ago
Warszawa, Czech Republic Devire Full timeMin. 2 lata praktycznego doświadczenia zawodowe na stanowisku Inżynier Danych\Data Engineer w samodzielnym budowaniu wydajnych i skalowalnych rozwiązań w architekturze Data Lakehouse, Umiejętność projektowania i implementacji potoków ETL/ELT, które przetwarzają duże zbiory danych z różnych źródeł, wraz z ich monitorowaniem i...
-
Architekt Danych @ Devire
1 week ago
Warszawa, Czech Republic Devire Full timeWykształcenie wyższe techniczne (np. informatyka, inżynieria danych lub pokrewne), Minimum 3-5 lat doświadczenia w obszarze zarządzania danymi, w tym minimum 2 lata na stanowisku związanym z architekturą danych z wykorzystaniem platformy chmurowej Azure oraz jej usług związanych z przetwarzaniem i analizą danych (np. Azure Data Lake Storage,...
-
Fullstack Java Developer @ Devire
2 weeks ago
Warszawa, Czech Republic Devire Full timeAt least 3 years of experience in a position related to Software Engineering, Languages: Java (preferably 17+ but not a must, Spring), Javascript (preferably Angular 15+ but not a must), Technologies: SOA, API, Kubernetes, Ansible, Terraform, Jenkins, SQL, Understanding of Agile and Project methodologies: Scrum, SAFe, Agile and Waterfall, High analytical...
-
Warszawa, Czech Republic Devire Full timeExperience (5–10 years)in frontend or Fullstack development Frontend / Full Stack development with Java or React + TypeScript DevOps, SRE, or Infrastructure as Code Large distributed systems and AI workflows Strong programming skills in at least one of: Java or React + TypeScript Solid software engineering fundamentals Continuous Integration...
-
Junior Credit Risk Analyst @ Devire
6 days ago
Warszawa, Czech Republic Devire Full timeRequirements 0-1 year of experience in an analytical financial role Understanding of derivatives products (FUTURES, OPTIONS, Hedge FUNDS, MUTUAL FUNDS and etc.) MUST HAVE Bachelor's degree preferred but not required Excellent communication skills/ English C1 Basic accounting or financial analysis skills Knowledge of Excel Strong organizational skills...
-
IT Recruitment Expert @ Devire
2 weeks ago
Warszawa, Czech Republic Devire Full timeOczekiwania minimum 4-5 lat doświadczenia w rekrutacjach IT (preferowane doświadczenie w pracy z Klientem, np. w outsourcingu lub software house’ach), umiejętność samodzielnego prowadzenia pełnego procesu rekrutacyjnego – od screeningu po zamknięcie rekrutacji z najlepiej dopasowanych kandydatów, intuicja, wyczucie ludzi i inteligencja...
