Старший DWH-разработчик
Коротко
Develops and optimizes ETL systems and scalable data warehouses for sales, accounting, and logistics domains. · Needs: Key developer on large project; ETL architecture; Airflow; SQL; columnar DB (Vertica, Greenplum, Exadata, Teradata); Python; Bash; Docker.
Описание от работодателя
Привет! Это команда DWH. Мы ищем разработчика аналитического хранилища Ozon, который умеет работать с большими объёмами данных, оптимизировать SQL-запросы, строить ETL-процессы, разбирать ошибки и взаимодействовать с бизнес-пользователями и аналитиками.
Наш стек
Trino, Vertica, Hadoop, Spark, Jupyter Notebook, Python, Airflow, Docker.
Вы будете
Разрабатывать и развивать ETL-системы, которые обеспечивают данными различные предметные области: продажи, учёт, логистику.
Анализировать данные и проектировать структуры данных под аналитические потребности различных бизнес-подразделений.
Оптимизировать и мониторить пайплайны обработки данных, повышая их производительность и стабильность.
Проектировать и реализовывать масштабируемые хранилища данных на базе HP Vertica, Trino, ClickHouse, PostgreSQL и Hadoop.
Нам важно
Самостоятельность в решении задач и опыт в роли ключевого разработчика на крупном проекте.
Опыт проектирования архитектуры хранения данных и связанных ETL-процессов.
Умение работать с техническими требованиями: аргументированно предлагать изменения и находить оптимальные решения.
Хорошие навыки проектирования и реализации ETL-процессов, обязательное знание Airflow.
Отличное знание SQL и системное мышление.
Опыт разработки хранилищ данных с использованием одной из колоночных СУБД: Vertica, Greenplum, Exadata, Teradata.
Опыт программирования на Python, в том числе для разработки решений по автогенерации ETL-задач и реализации логических алгоритмов.
Навыки работы с Bash и Docker.
Будет плюсом
Опыт работы со Spark.
Опыт работы с несколькими ETL-инструментами и их использованием в горизонтально масштабируемых системах обработки данных.
Знания в одной из областей: CI/CD, frontend- или backend-разработка, разработка интеграционных потоков.
Желание участвовать в управлении проектами и доводить фичи до production.
Желание развиваться в наставничестве и помогать другим участникам команды.