Data Engineer GCP ETL

Місто : , Odesa,
Компанія : PKO Bank Polski
Зарплата :
Знайдено : 6 днів тому

Опис

Na co dzień w naszym zespole: budujemy procesy zasilania operacyjnej składnicy danych, projektujemy i realizujemy rozwiązania informatyczne w obszarze zasilania danych, analizujemy dane oraz przygotowujemy dla nich modele logiczne i fizyczne, stroimy zapytania SQL na bazie relacyjnych i hurtowianych w on-prem i na Chmurze GCP, tworzymy przepływy off-linowe oraz strumieniowe danych, przygotowujemy datamarty tematyczne na bazach relacyjnych i kolumnowych, tworzymy koncepcje rozwiązań i implementacje rozwiązań w oparciu o wymagania i potrzeby biznesu, usuwamy incydenty i bierzemy udział w rozwiązywaniu problemów, wspieramy testy i wdrażania zmian w zakresie procesów zasilania danych, pomagamy przy serwisowaniu wdrożonego oprogramowania, tworzymy rozwiązania ładowania danych w Python, pracujemy zgodnie z modelem DevOps. To stanowisko może być Twoje, jeśli: posiadasz doświadczenia jako develeoper Data Enegineer: - w obszarze procesów integracji danych za pomocą narzędzi ETLowych (Informaitica Power Center), - w obszarze technologii GCP (Big Query, Pub-Sub, Google Cloud Anthos, Cloud Storage Buckets), - w programowaniu w języku Phyton (znajomość jednego z framework Phyton: Flask, Django), - w projektowaniu i tworzeniu relacyjnych baz danych (PostgresSQL, Oracle), pracujesz w środowisku chmurowym na Google Cloud Platform (Big Query, Cloud SQL, Kubernetes) znasz środowisko Linux (doświadczenie w pracy z terminalem, podstawowa znajomość skryptów powłoki bash), znasz narzędzie harmonogramujące: Apache Airflow, masz doświadczenie w pracy z dużymi wolumenami danych ~100TB. Dodatkowym atutem będzie znajomość: Dash, Streamlit, SqlAlchemy, aplikacji uruchamianymi w kontenerach (Kubernetes, Anthos, Docker lub podobne), aplikacji do harmonogramowania zadań ScheduleIN, środowiska SAS, aplikacji do raportowania i budowania dashboardów np. Google Data Studio, SuperSet, narzędzi do monitorwania np. grafana, rozwiązań chmurowych wykorzystywanych w procesach ładowania danych np.. data flow, nifi. Dołączając do nas zyskujesz: pakiet benefitów, w tym prywatną opiekę medyczną, Pracowniczy Program Emerytalny, System Kafeteryjny MyBenefit, kartę Multisport, atrakcyjną ofertę produktów bankowych, w tym kredytu hipotecznego, dedykowany system szkoleń, możliwość zdobywania doświadczenia, poznania różnorodnej technologii, w największej instytucji finansowej w kraju, stabilizację zatrudnienia – umowę o pracę, dedykowany system premiowy.  Lokalizacja: Warszawa (praca hybrydowa - wizyty w biurze raz w tygodniu)

Схожі вакансії

    Customer Data Platforms Data Engineer

    • , Warsaw ,
    • 17 годин тому

    ... + years of experience as a Data Engineer 5+ years of expertise in implementing and optimizing Customer Data Platforms 5+ years of exposure ...

    jobs.jti.com

    Consumer Data Product Manager

    • , Warsaw ,
    • 17 годин тому

    ... employee referral program, your personal data will be processed until the ... the processing of your personal data may be extended each time ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    Marketing Automation Product Manager

    • , Warsaw ,
    • 17 годин тому

    ... employee referral program, your personal data will be processed until the ... the processing of your personal data may be extended each time ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    I&O DE Process Manager

    • , Warsaw ,
    • 10 днів тому

    ... employee referral program, your personal data will be processed until the ... the processing of your personal data may be extended each time ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    IT Process Analyst Manager (SAP PPM & SAP PS)

    • , WARSAW ,
    • 17 годин тому

    ... Business Intelligence groups assess master data and reporting requirements for key ... employee referral program, your personal data will be processed until the ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    IT Business Expert Manager

    • , WARSAW ,
    • 17 годин тому

    ... employee referral program, your personal data will be processed until the ... the processing of your personal data may be extended each time ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    IT Process Analyst Manager

    • , WARSAW ,
    • 17 годин тому

    ... employee referral program, your personal data will be processed until the ... the processing of your personal data may be extended each time ... the processing of your personal data during the recruitment process, further ...

    jobs.jti.com

    Data Governance Manager

    • , Warsaw ,
    • 17 годин тому

    ... ensuring adherence to an enterprise data governance and data quality framework for data policies, standards, and practices, both ... of Azure Purview and Data Catalog is a plus Knowledge of Microsoft Data Quality and Common Data Model is a plus Knowledge ...

    jobs.jti.com

    Data Managment Associate

    • , Bucharest ,
    • 17 годин тому

    ... on advancing their career in data analytics, data governance, and data management. This position is tailored ... in handling different types of data formats like CSV, JSON, parquet, ...

    jobs.jti.com

    Data Managment Associate

    • , Bucharest ,
    • 17 годин тому

    ... on advancing their career in data analytics, data governance, and data management. This position is tailored ... in handling different types of data formats like CSV, JSON, parquet, ...

    jobs.jti.com

    Data Managment Associate

    • , Bucharest ,
    • 17 годин тому

    ... on advancing their career in data analytics, data governance, and data management. This position is tailored ... in handling different types of data formats like CSV, JSON, parquet, ...

    jobs.jti.com

    VP of Data & Insights

    • Jobs for Humanity
    • Amsterdam, North Holland, Netherlands
    • 3 дні тому

    ... Description JOB DESCRIPTION FOR: VP Data & InsightsOur CompanyEstablished in 1996 in ... will also be a key Data and Insights Partner to Central ... application is successful, your personal data may be used for a ...

    jobs.smartrecruiters.com

    Data Governance Analyst Specialist - Retention

    • Jobs for Humanity
    • Cincinnati, Ohio, United States
    • 4 дні тому

    ... knowledge of and experience with data governance as a practice, including enterprise data management, data lifecycle management, data quality, data lineage, meta data management, data methodologies, data analytics and reporting, and the ...

    jobs.smartrecruiters.com

    DWH Architect Data Modeling

    • Kitopi
    • , Kyiv,
    • день тому

    ... working in data, with experience spanning multiple data disciplines, including data science, data engineering, data analysis, and data warehousing.   3+ years of experience in data modeling at a high-growth ... that the data models would be able to ...

    ua.talent.com

    DWH Architect Data Modeling

    • Kitopi
    • , Odesa,
    • день тому

    ... working in data, with experience spanning multiple data disciplines, including data science, data engineering, data analysis, and data warehousing.   3+ years of experience in data modeling at a high-growth ... that the data models would be able to ...

    ua.talent.com

    Data Architect

    • Balsam Brands
    • Mexico City, Mexico City, Mexico
    • 10 днів тому

    ... and or GCPExperience in Azure Data Factory (ADF) or equivalent ETL toolProficiency in designing and implementing data pipelines using diverse data sources including databases, APIs, external data providers, and streaming sourcesDemonstrated history ...

    jobs.smartrecruiters.com

    Data Governance Manager

    • , Bucharest ,
    • 17 годин тому

    ... ensuring adherence to an enterprise data governance  and data quality framework for data policies, standards and practices, both ... and technology to ensure that data related business requirements are clearly ...

    jobs.jti.com

    Data Engineer

    • Inter IKEA Group
    • Delft, Netherlands
    • 10 днів тому

    ... our value chain.As a Data Engineer, you will be part of the Data Engineering and Analytics chapter while ... designing efficient, robust and automated data pipelines, ETL workflows, data warehousing and Big Data processing.Proficiency in Python and ...

    jobs.smartrecruiters.com
Top