Middle Data Engineer
Описание от работодателя
Data Engineering-команда отвечает за инфраструктуру данных: сбор, хранение и обработку игровых и продуктовых метрик. Мы помогаем аналитикам и продуктовым командам работать с данными быстро, стабильно и в нужном объеме.
Задачи, с которыми вам предстоит работать:
Разрабатывать и поддерживать DAG’и для Apache Airflow
Настраивать процессы CDC (Change Data Capture) для передачи продакшн-данных в аналитическое хранилище
Разрабатывать/оптимизировать витрины данных с использованием SQL для аналитических задач
Разрабатывать трансформации данных на базе Apache Flink
Следить за качеством данных с помощью инструментов Data Quality и оптимизировать их обработку
Какие навыки пригодятся:
Уверенные знания Python, Java
Глубокое понимание и умение работать с SQL
Опыт работы с Apache Kafka, Apache Airflow, dbt, Great Expectations, Apache Flink, Apache Trino/Presto, Hive, Docker, MongoDB, PostgreSQL, AWS
Будет плюсом:
Опыт работы с Apache Spark, Kubernetes, CI/CD, Helm, Terraform
Навыки программирования на Scala
У нас вы найдете:
Возможность влиять на продукт и решения внутри команды
Шанс внести свой вклад в продвижение игр, в которые играют миллионы игроков ежемесячно
Прямую коммуникацию без лишней бюрократии
Команду, где принято делиться опытом и поддерживать друг друга
Атмосферу свободы и открытости
Заботу о сотрудниках, которую вы заметите и в личном отношении, и через полезные бенефиты
И подробнее о бенефитах:
Официальное оформление
Возможность работать из комфортабельных офисов в разных странах или удаленно
Гибкий подход к формату и месту работы
Медицинское страхование, чекапы, компенсация сессий с психологом
Помогаем расти в профессии – корпоративная библиотека, внутренние курсы, английский от SkyEng, возможность учиться и посещать профильные мероприятия за счет компании
Вся необходимая техника – даем в пользование ноутбук, программы и лицензии, а также другую нужную технику для работы
Скидки на фитнес, спортзал в офисах, компенсация участия в спортивных соревнованиях