Data Engineer
Описание от работодателя
Чем предстоит заниматься
Разрабатывать и поддерживать ETL/ELT-процессы полного цикла;
Строить и оптимизировать хранилище данных и витрины;
Следить за стабильностью и производительностью data-пайплайнов;
Участвовать в проектировании data-моделей и архитектуры;
Внедрять проверки качества данных и мониторинг;
Документировать решения и улучшать процессы разработки.
Мы ждём
Опыт работы на позиции Data Engineer от 2 лет;
Хорошее знание SQL, включая оптимизацию сложных и ресурсоёмких запросов, работа с оконными функциями;
Опыт работы с ClickHouse, понимание особенностей колоночных БД;
Опыт работы с Airflow: построение и сопровождение DAG-ов, анализ и устранение ошибок;
Знание Python для data-задач: обработка данных, разработка коннекторов и утилит, написание тестов;
Опыт разработки ETL/ELT-процессов и работы с большими объёмами данных;
Опыт обеспечения качества данных: логирование, мониторинг, проверки, алерты, соблюдение SLA;
Опыт работы с Git, участие в code review, понимание CI/CD и Merge/Pull Requests;
Опыт работы с Docker. ## Будет плюсом
Опыт работы с Sql Server, Firebird;
Опыт работы со стриминговой обработкой данных;
Знание подходов к моделированию данных Kimball / Data Vault;
Опыт работы с GitLab CI;
Использование LLM в своей работе.
Условия
Только гибридный график или офис ( удаленного формата нет).
Уровень ЗП обсуждается с успешным кандидатом.
Классные ежемесячные бонусы от нас: билеты в кино, посещение боулинга\бильярда, терм, колеса обозрения и детских парков!