от компании (организации): Сбер. IT в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Web инженер"
с заработной платой: по договоренности
Вакансия № 22289092 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Воскресенье, 22 сентября 2024 года.
Дата обновления вакансии № 22289092 на сайте Работа в Москве и Московской области (МО, Подмосковье): Воскресенье, 10 ноября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 22289092 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
3–6 лет
Тип занятости:
полная занятость
График работы:
полный день
Дополнительные сведения о вакансии: Team Lead Data Engineer (Развитие внешнеэкономического партнерства)
Наша задача реализовать новое ПКАП(прикладное корпоративное аналитическое приложение) и перенести все сервисы в него из легаси систем, дополнив современными техническими возможностями, позволяющими ускорить, облегчить, автоматизировать работу пользователей с данными.
Для решения бизнес задач Дивизиона «Развитие внешнеэкономического партнерства» в плотном взаимодействии с командами DS , ML, бизнес аналитиков, в рамках проекта нам потребуется построить витрины данных в Hadoop, PostgreSQL и обеспечить потребности смежных команд в необходимых данных.
Наша команда Data - инженеров и аналитиков занимается проектированием, разработкой , тестированием и выводом в промышленную эксплуатацию целевых решений (витрин данных и реализация интеграционных процессов между аналитическими и продуктовыми системами Банка). Наша цель собрать данные из различных Источников данных Банка, мы будем работать с данными как с актуальностью Т-1 так и Near Real Time репликами. В ходе работ вы столкнетесь с огромными данными (таблицы в 10-ки Тб и сотни миллиардов записей), извлечением и загрузкой данных, методами их обработки и трансформации, современными инструментами DEVOPS (CI/CD). Источники данных – продуктовые системы Банка (реляционные СУБД Oracle, MS SQL, PostgreSQL), работать предстоит с реализованными в Hadoop репликами источников. Команда работает c применением методологии Agile, используя инструменты Jira и Confluence.
Обязанности работника на вакансии: Team Lead Data Engineer (Развитие внешнеэкономического партнерства)
- Разработка и поддержка витрин данных в Облаке данных (используются SQL, Java, Scala);
- Вывод витрин в промышленную эксплуатацию;
- Управление качеством данных.
Требования к работнику на вакансии: Team Lead Data Engineer (Развитие внешнеэкономического партнерства)
- Отличное знание SQL (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов);
- Навыки разработки витрин данных на Big Data с использованием описанного ниже стека инструментов и знанием соответствующего окружения и языков программирования:
- экосистема Hadoop (Hive, Spark, Kafka, Oozie);
- языки программирования (Scala, Java, Python);
- инструменты DEVOPS (Git, Nexus, Jenkins);
- Понимание принципов ETL-процессов;
- Опыт проектирования, разработки витрин данных, тестирования и вывода решений в промышленную эксплуатацию
- Опыт от 1 года работы с экосистемой Hadoop в роли Data инженера.
Откликнуться на эту вакансию: Team Lead Data Engineer (Развитие внешнеэкономического партнерства)
Предыдущая вакансия:
Вакансия № 22289084 на должность Web-администратор от компании ООО Бизнес Группа МВМ Летруа в городе (населенном пункте) Москва