Data Quality Engineer @ Upvanta

4 days ago

Remote, Czech Republic Upvanta Full time
Doświadczenie:
  • Praca z hurtowniami danych w chmurze (preferowane Snowflake).
  • Realizacja projektów z zakresu Data Quality (walidacja przepływów danych, projektowanie reguł DQ, porównania danych źródłowych i wynikowych).
Bardzo dobra znajomość:
  • Snowflake (projektowanie, walidacja, monitorowanie danych).
  • SQL (tworzenie zapytań kontrolnych, reguł walidacyjnych).
  • Airflow (automatyzacja procesów monitorowania jakości).
  • Python (implementacja testów jakości danych, porównań danych).
Dodatkowe kompetencje (min. średni poziom):
  • AWS (S3, Batch, Kinesis, Firehose, Lambda).
  • GitLab (kontrola wersji, CI/CD dla procesów DQ).

Poszukujemy doświadczonego Data Quality Engineera, którego zadaniem będzie zapewnienie spójności, integralności i wiarygodności danych w hurtowni Snowflake.Rola koncentruje się na projektowaniu i wdrażaniu procesów kontroli jakości danych - tak, aby dane były zgodne na każdym etapie przetwarzania: od źródła, przez transformacje, aż po warstwę raportową. Kandydat będzie blisko współpracował z Data Engineerami oraz zespołami biznesowymi, monitorując przepływy danych, wychwytując anomalie i proponując usprawnienia.


,[Projektowanie i implementacja procesów monitorowania oraz poprawy jakości danych (reguły DQ, testy porównawcze)., Tworzenie struktur i przepływów wspierających audyt i kontrolę danych., Walidacja zgodności danych – od wejścia, przez transformacje, aż po warstwę wynikową., Automatyzacja procesów monitorowania jakości z wykorzystaniem Airflow i Python., Współpraca i dzielenie się wiedzą w ramach zespołu scrumowego., Praca w języku polskim z lokalnym zespołem oraz w języku angielskim z zespołami międzynarodowymi.] Requirements: Snowflake, SQL, Airflow, Python, AWS S3, Kinesis, AWS Lambda, GitLab

  • Databricks Data Engineer

    2 days ago

    Remote, Czech Republic Upvanta Full time

    Requirements: Minimum 8 years of experience in Data Engineering At least 4 years of hands-on experience with Databricks, including services like data pipelines and Unity Catalog At least 2 years of experience working with Big Data technologies Proficiency in Python and SQL Solid background in data warehousing, ETL, distributed data processing, software...

  • Data Engineer – Trino/Apache Trino @ Upvanta

    4 days ago

    Remote, Czech Republic Upvanta Full time

     Requirements: Strong proficiency in Starburst Trino / Apache Trino (administration, configuration, tuning) Experience with AWS Solid skills in monitoring and debugging distributed queries Understanding of security frameworks (LDAP, Ranger) Programming skills (Python, SQL, Bash, Node.js, Linux/Unix Shell etc.) Experience with data engineering practices...

  • Mid Data Engineer

    2 weeks ago

    Remote, Czech Republic Upvanta Full time

     Requirements:Strong proficiency in data streaming technologies (CDC, Confluent, Spark Structured Streaming).Programming experience in Python, SQL, Bash, Node.js and working knowledge of Linux/Unix Shell.Hands-on experience with data engineering practices (versioning, release management, deployment).Familiarity with Agile methodologies and software...

  • Senior Data Engineer

    4 days ago

    Remote, Czech Republic Upvanta Full time

    Wymagania: Bardzo dobra znajomość Pythona w kontekście inżynierii danych. Doświadczenie w orkiestracji procesów danych (Apache Airflow lub podobne). Znajomość AWS Services (m.in. Glue, S3, Lambda, Redshift). Doświadczenie w integracji i automatyzacji rozwiązań w obszarze platform danych. Mile widziana praktyczna wiedza z...

  • Data Quality Engineer @ ITDS

    2 days ago

    Remote, Czech Republic ITDS Full time

    Strong experience working with cloud data warehouses High-level expertise in Snowflake and SQL Proficiency in dbt for data transformation Experience with Airflow for workflow orchestration Solid skills in Python for data engineering tasks Practical knowledge of GitLab and CI/CD processes Understanding of AWS services such as S3 and IAM Proven experience in...

  • Data Engineer

    4 days ago

    Remote, Czech Republic Upvanta Full time

     Wymagania Minimum 5–7 lat doświadczenia w inżynierii danych, w tym w obszarze data streaming. Bardzo dobra znajomość CDC i różnych metod ekstrakcji danych. Praktyczne doświadczenie z Confluent oraz Spark Structured Streaming. Biegłość w programowaniu (Python, SQL, Bash, Node.js). Doświadczenie w pracy z narzędziami chmurowymi i...

  • Quality Automation Engineer @ PAR Data Central

    4 days ago

    Remote, Czech Republic PAR Data Central Full time

    Hands-on experience in writing automated test cases and developing test automation QA frameworks, with at least four years of experience. Proficiency in programming languages such as C# and JavaScript is essential. Hands-on experience with CSS, HTML, and MSSQL for data retrieval and verification. Solid experience with Object-Oriented Programming...

  • Data Engineer

    4 days ago

    Remote, Czech Republic Upvanta Full time

    Wymagania: Doświadczenie praktyczne w pracy z Matillion i jego modułami Bardzo dobra znajomość SQL Znajomość koncepcji modelowania danych i procesów ELT Mile widziane: doświadczenie w pracy z SQL Framework w HH Umiejętność korzystania z systemów kontroli wersji (Git) Znajomość praktyk CI/CD Dobra znajomość języka angielskiego (praca w...

  • Azure Data Architect @ Upvanta

    2 days ago

    Remote, Warszawa, Wrocław, Czech Republic Upvanta Full time

    Wymagania: Wykształcenie wyższe (magister) w dziedzinie informatyki lub pokrewnej. Minimum 5 lat doświadczenia w architekturze i inżynierii danych. Doświadczenie w business intelligence, analizie danych i raportowaniu w środowisku korporacyjnym. Doświadczenie w projektowaniu, tworzeniu i wdrażaniu rozwiązań w chmurze Microsoft Azure. Dobra...

  • Azure Data Architect @

    1 week ago

    Remote, Wrocław, Warszawa, Czech Republic Upvanta Full time

    Requirements:University degree in Computer Science or a related field.Minimum 5 years of experience in data architecture and engineering.Experience working with Microsoft Azure, including Azure Databricks, Azure Data Factory, Data Lake, SQL Database.Knowledge of data security, from network layer to user interface.Ability to design BI solutions, reporting,...