Data Engineer
Коротко
Builds and maintains ETL/ELT pipelines, data models, and DWH/Data Lake/Data Mart solutions for a holding company's centralized data platform. · Needs: 2+ years as Data Engineer/ETL Developer/Analytics Engineer; strong SQL (CTEs, window functions); Python; ETL/ELT pipelines; DWH/Data Lake principles
Описание от работодателя
Centras Group – группа инновационных компаний, работающих в финансовой сфере.
В состав группы входят: «Сентрас Капитал» – головная компания Группы Сентрас; «Сентрас Секьюритиз» – брокерская компания; «Сентрас Иншуранс», «Коммеск-Өмiр» – страховые компании; SOS Medical Assistance – медицинские центры; Popeyes – сеть ресторанов быстрого обслуживания; Продуктовая команда -Alpha; iHub- централизованная IT-команда компании .
Наш новый Data Engineer присоединится к новому отделу DataHub , который создаёт централизованную платформу для сбора, интеграции и подготовки данных холдинга, обеспечивая ими бизнес-продукты, аналитику и принятие решений на основе данных.
Обязанности
Разрабатывать и поддерживать ETL / ELT -пайплайны для централизованного сбора данных из различных источников холдинга.
Интегрировать данные из БД, API , файлов, внешних систем и внутренних сервисов .
Проектировать и развивать модели данных для аналитических и продуктовых задач.
Создавать и оптимизировать DWH / Data Lake / Data Mart решения.
Обеспечивать качество, целостность и актуальность данных.
Автоматизировать процессы загрузки, трансформации и обработки данных.
Требования
Обязательно:
Опыт работы Data Engineer / ETL Developer / Analytics Engineer от 2 лет .
Уверенный SQL : сложные запросы, CTE, оконные функции, оптимизация.
Хорошее знание Python для обработки данных и автоматизации.
Опыт построения и поддержки ETL / ELT -пайплайнов .
Понимание принципов построения DWH , Data Lake и витрин данных .
Опыт работы с реляционными БД — PostgreSQL / MySQL / ClickHouse или аналогами.
Понимание принципов моделирования данных и построения аналитических моделей.
Опыт работы с Git и понимание основных принципов CI/CD.
Умение самостоятельно разбираться в новых источниках данных и технической документации.
Будет преимуществом:
Опыт работы с Apache Airflow или другими оркестраторами.
Опыт работы с Yandex Cloud / AWS / GCP .
Опыт с ClickHouse, Greenplum, BigQuery, Spark или аналогичными технологиями.
Опыт построения Data Lake / Lakehouse.
Знание Kafka и принципов потоковой обработки данных.
Опыт работы с dbt.
Понимание Data Governance, MDM и Data Quality.
Опыт построения data-платформ для нескольких бизнес-направлений.
Условия:
Оформление согласно трудовому законодательству РК
Скидки на медицинское страхование в собственной клинике
Обучение и профессиональное развитие в iHub
Участие в конференциях (внутренние и внешние)
Корпоративная культура: тимбилдинги (летние и зимние), различные спортивные мероприятия, интеллектуальные игры (Quizы)
Предоставление выходного дня (адм. дни - в зависимости от стажа работы в компании) без удержания заработной платы
Отпуск 28 календарных дней
Начисление баллов – Сенткоинов, возможность заработать внутреннюю валюту и потратить её на разные бонусы в компании.