от компании (организации): Норильский никель, ГМК в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Консалтинг, аутсорсинг"
с заработной платой: по договоренности
Вакансия № 10036783 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Суббота, 31 августа 2024 года.
Дата обновления вакансии № 10036783 на сайте Работа в Москве и Московской области (МО, Подмосковье): Понедельник, 23 сентября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 10036783 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
3–6 лет
Тип занятости:
полная занятость
График работы:
полный день
Дополнительные сведения о вакансии: Data Engineer
Вакансия открыта в ООО "Норникель - Общий центр обслуживания" (дочернее общество ПАО "ГМК "Норильский никель")
Обязанности работника на вакансии: Data Engineer
- Анализ бизнес потребностей и декомпозиция предполагаемых направлений, требующих проработки;
- Подготовка имеющихся данных и данных, доступных для получения и создание новых источников данных для анализа при выполнении задач, выполняемых DataScience консультантами;
- Применение алгоритмов и инструментов для сбора и трансформации данных в удобный для анализа вид;
- Осуществление контроля за качеством собираемых данных их агрегацией и хранением;
- Анализ и повышение эффективности реализации процессов по сбору и хранению данных;
- Формирование направлений развития источников данных,
- Моделирование очистки данных (cleaning), построение архитектуры решения в части источников данных и их трансформации;
- Выделение и перевод части процедур по очистке и подготовки данных (первично выполняемых при анализе данных) в области трансформации данных - подготовка вторичных источников данных;
- Поддержание концепции многоуровневой модели данных в "Озере данных";
- Описание основной идеи в части потоков и трансформации данных;
- Оценка качества данных;
- Использование и настройка инструментов для работы с большими массивами полуструктурированных или неструктурированных данных;
- Эффективная коммуникация с владельцем данных и остальной командой;
- Простое и понятное изложение сложных концепций в части моделей и трансформаций данных и технической реализации.
Требования к работнику на вакансии: Data Engineer
- Знание одной или нескольких профессиональных систем/языков: обязательные - SQL, NoSQL, Java Script, Java, дополнительные - R, Scala, KNime, Matlab, RapidMiner.
- Опыт работы с Hadoop, Spark, , MapReduce, Hive, Pig, Data streaming (Kafka, NiFi), Kubernetes, Docker.
- Работа в следующем технологическом окружении:
• Python Application Server (Anaconda);
• Jupyter notebook;
• R server, RStudio;
• Kubernetes, Docker;
• Hadoop (Hortonworks HDP+HDF), Spark, Hana Vora, SAP Hana, Ubuntu, CentOs.
- Навыки подготовки презентаций, оформления отчетных материалов, документирования.
- Будет преимуществом сертификация в области Data Science, MS DBA, Orcale DBA, Hortonworks HDP CERTIFIED DEVELOPER.
Условия труда для работника на вакансии: Data Engineer
- Место работы: ул. Тестовская, "Северная башня", ст.м Выставочная, Международная, Деловой центр;
- Достойный уровень заработной платы, премия по итогам года;
- Полное соблюдение ТК РФ (оформление, оплата больничных, отпусков и пр.)
- График работы с 9:00 до 18:00, пятница с 09:00-16:45;
- ДМС, включая стоматологию и полис выезжающего за рубеж.
Откликнуться на эту вакансию: Data Engineer
Предыдущая вакансия:
Вакансия № 10036782 на должность Операционный директор производства от компании Cornerstone Russia в городе (населенном пункте) Москва