← к выдаче
разработка

Data Engineer

Алматы4 дн. назад

Коротко

Builds and maintains ETL/ELT pipelines, data models, and DWH/Data Lake/Data Mart solutions for a holding company's centralized data platform. · Needs: 2+ years as Data Engineer/ETL Developer/Analytics Engineer; strong SQL (CTEs, window functions); Python; ETL/ELT pipelines; DWH/Data Lake principles

Описание от работодателя

Centras Group – группа инновационных компаний, работающих в финансовой сфере. В состав группы входят: «Сентрас Капитал» – головная компания Группы Сентрас; «Сентрас Секьюритиз» – брокерская компания; «Сентрас Иншуранс», «Коммеск-Өмiр» – страховые компании; SOS Medical Assistance – медицинские центры; Popeyes – сеть ресторанов быстрого обслуживания; Продуктовая команда -Alpha; iHub- централизованная IT-команда компании . Наш новый Data Engineer присоединится к новому отделу DataHub , который создаёт централизованную платформу для сбора, интеграции и подготовки данных холдинга, обеспечивая ими бизнес-продукты, аналитику и принятие решений на основе данных. Обязанности Разрабатывать и поддерживать ETL / ELT -пайплайны для централизованного сбора данных из различных источников холдинга. Интегрировать данные из БД, API , файлов, внешних систем и внутренних сервисов . Проектировать и развивать модели данных для аналитических и продуктовых задач. Создавать и оптимизировать DWH / Data Lake / Data Mart решения. Обеспечивать качество, целостность и актуальность данных. Автоматизировать процессы загрузки, трансформации и обработки данных. Требования Обязательно: Опыт работы Data Engineer / ETL Developer / Analytics Engineer от 2 лет . Уверенный SQL : сложные запросы, CTE, оконные функции, оптимизация. Хорошее знание Python для обработки данных и автоматизации. Опыт построения и поддержки ETL / ELT -пайплайнов . Понимание принципов построения DWH , Data Lake и витрин данных . Опыт работы с реляционными БД — PostgreSQL / MySQL / ClickHouse или аналогами. Понимание принципов моделирования данных и построения аналитических моделей. Опыт работы с Git и понимание основных принципов CI/CD. Умение самостоятельно разбираться в новых источниках данных и технической документации. Будет преимуществом: Опыт работы с Apache Airflow или другими оркестраторами. Опыт работы с Yandex Cloud / AWS / GCP . Опыт с ClickHouse, Greenplum, BigQuery, Spark или аналогичными технологиями. Опыт построения Data Lake / Lakehouse. Знание Kafka и принципов потоковой обработки данных. Опыт работы с dbt. Понимание Data Governance, MDM и Data Quality. Опыт построения data-платформ для нескольких бизнес-направлений. Условия: Оформление согласно трудовому законодательству РК Скидки на медицинское страхование в собственной клинике Обучение и профессиональное развитие в iHub Участие в конференциях (внутренние и внешние) Корпоративная культура: тимбилдинги (летние и зимние), различные спортивные мероприятия, интеллектуальные игры (Quizы) Предоставление выходного дня (адм. дни - в зависимости от стажа работы в компании) без удержания заработной платы Отпуск 28 календарных дней Начисление баллов – Сенткоинов, возможность заработать внутреннюю валюту и потратить её на разные бонусы в компании.