Data Engineer junior+
Эта же роль в других локациях (2)
- Санкт-Петербург
- Екатеринбург, Санкт-Петербург
Коротко
Designs and implements ELT/ETL solutions, data marts in Hadoop, Hive, HBase, SQL Server, PostgreSQL, Clickhouse; optimizes data scientist MVPs and handles · Needs: Experience with MSSQL, Oracle, PostgreSQL, or Clickhouse; integration experience; corporate data warehouse or BI project participation; Hadoop, Hive, Spark
Описание от работодателя
В ООО "Газпромнефть-Региональные продажи" требуется дата-инженер
Обязанности:
Проектирование и реализация ELT/ETL-решений для загрузки сырых данных в Hadoop,
проектирование и реализация хранилищ и витрин данных в Hive, Hbase, SQL Server, PostgreSQL, Clickhouse и соответствующих ETL,
проектирование и реализация решений для межсистемной интеграции (rest, soap, MQ, ftp, etc) ,
оптимизация MVP-решения команд data scientist для переноса их в продуктив,
развитие архитектуры и оптимизация работы типовых решений на платформе,
участие в апробации и оптимизации новых компонент платформы,
анализ и оптимизация бизнес-требований, подготовка технической документации,
решение инцидентов эксплуатации систем и модулей.
Требования:
Опыт разработки решений на базе одной из СУБД: MSSQL Server,Oracle, PostreSQL, Clickhouse
Опыт интеграции с различными источниками данных (rest, soap, api, ftp, dfs, http, rdbms)
Участие в проектах построения корпоративного хранилища данных или BI системы для крупного бизнеса
ПО: Hadoop HBase/Hive/Spark/Scala, Informatica DEI/BDM/PC, Kafka
ЯП: SQL, Python
Командные оболочки: Bash, PowerShell
Devops: GitLab, Jira, Jenkins
Аналитический склад ума,
Умение работать в команде,
Умение быстро принимать верные решения в критических ситуациях,
Стремление к профессиональному росту
Условия:
Достойную заработную плату, годовую премию по результатам работы
Постоянный трудовой договор
Качественную программу ДМС со стоматологией с первого месяца работ
Неограниченный доступ к образовательному контенту на корпоративном портале знаний
Подписка на лучшие электронные библиотеки.