Backend-разработчик
Коротко
Develops and maintains ETL/ELT data loading processes, designs data structures in PostgreSQL and ClickHouse, creates DAG pipelines in Apache Airflow, and · Needs: 1-3 years of experience in data development, analytics, or backend development; confident SQL; practical experience with PostgreSQL.
Описание от работодателя
Мы – команда «Газпромнефть – Цифровые решения», часть ИТ-функции «Газпром нефти». Команда, которая научила нейросети находить нефть, запустила первую в мире цифровую систему управления арктической логистикой и первой в мире заправила самолет по блокчейн. Мы переводим в «цифру» каждый этап работы современного нефтяника: от геологической разведки и бурения скважин до процесса переработки нефти и момента, когда она в виде топлива попадает в баки автомобиля, самолета или, например, становится битумом для строительства дорог. Активы «Газпром нефти» – это сотни петабайт данных, которые генерируют объекты компании в России и за рубежом. Нас вдохновляет идея развития цифрового будущего нефтегазовой отрасли и промышленности в целом.
Обязанности:
Разработка и сопровождение процессов загрузки, преобразования и обработки данных (ETL/ELT).
Проектирование и оптимизация структур данных в PostgreSQL и ClickHouse.
Разработка SQL-запросов, хранимых процедур, представлений и витрин данных.
Создание и сопровождение DAG-пайплайнов в Apache Airflow.
Настройка расписаний, зависимостей, мониторинга и повторного запуска задач.
Разработка интеграций между источниками данных, базами данных и аналитическими системами.
Подготовка данных для построения отчетности и аналитики в PixBI.
Разработка и поддержка аналитических витрин, отчетов и наборов данных в PixBI.
Оптимизация производительности запросов, процессов загрузки и отчетов.
Контроль качества, полноты и актуальности данных.
Поиск и устранение ошибок в пайплайнах и процессах обработки данных.
Участие в проектировании архитектуры хранилища данных.
Документирование схем данных, процессов интеграции и разработанных решений.
Взаимодействие с аналитиками, разработчиками и бизнес-заказчиками.
Требования:
Опыт работы в области разработки данных, аналитики или backend-разработки от 1–3 лет.
Уверенное знание SQL.
Практический опыт работы с P ostgreSQL: написание сложных запросов,понимание индексов и планов выполнения,оптимизация запросов и структуры таблиц.
Опыт работы с ClickHouse : понимание особенностей колоночных СУБД, проектирование таблиц и выбор движков, работа с партиционированием и сортировкой, оптимизация аналитических запросов и загрузок.
Опыт разработки и сопровождения DAG в Apache Airflow.
Понимание принципов построения ETL/ELT-процессов.
Опыт подготовки данных и отчетов в PixBI, либо аналогичных BI-системах.
Понимание принципов построения хранилищ данных и аналитических витрин.
Навыки работы с Git и системами контроля версий.
Понимание основ Linux и командной строки.
Умение разбираться в чужом коде и находить причины ошибок.
Мы предлагаем:
Достойную твоего профессионального уровня заработную плату (уровень вознаграждения обсуждается индивидуально по результатам интервью)
Годовую премию по результатам деятельности, дополнительную материальную мотивацию (премии от руководителя)
Качественную программа ДМС со стоматологией с первого месяца работы; услуги телемедицины, консультации психолога, страхование жизни и здоровья в том числе за границей, льготные условия страхования для близких и возможность расширить перечень клиник по опции Flexible benefits
Компенсацию стоимости спортивных абонементов: компания компенсирует до 60% стоимости занятий любыми видами спорта
Неограниченный доступ к образовательному контенту на портале знаний от корпоративного университета
Подписка на лучшие электронные библиотеки с подборками IT-литературы (и не только)
Собственный центр профессионального развития, в котором проводятся комплексные программы обучения hard skills
Внутренние демодни, коуч-дни, питчи – то, что поможет продвигать и совершенствовать проекты и собственные идеи
Корпоративные скидки для изучения английского языка в малых группах онлайн и офлайн
Регулярные карьерные марафоны, индивидуальные карьерные консультации и планы развития
Общение вне рабочих рамок – независимо от того, в каком городе ты работаешь! От участия в корпоративных спортивных сообществах до онлайн-экскурсий и неформальных встреч в формате Random coffee
Работу в аккредитованной ИТ компании
В «Газпром нефть» ты можешь:
Работать с лучшими на рынке решениями для автоматизации процессов и внедрять эти решения в периметре компании (больше 100 дочерних обществ)
Иметь возможность выбирать решения или спроектировать свои
Найти свою нетривиальную задачу и выбрать процесс, который ты хочешь усовершенствовать, или узнать что-то новое, с чем не работал ранее. У нас широкое поле для творчества для создания и развития уникальных продуктов
Быть причастным к стратегическим проектам компании, принимать участие в проектной и экспертной работе.