от компании (организации): X5 RETAIL GROUP в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Администратор баз данных"
с заработной платой: по договоренности
Вакансия № 19946970 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Понедельник, 12 августа 2024 года.
Дата обновления вакансии № 19946970 на сайте Работа в Москве и Московской области (МО, Подмосковье): Воскресенье, 29 сентября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 19946970 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
1–3 года
Тип занятости:
полная занятость
График работы:
удаленная работа
Дополнительные сведения о вакансии: Data engineer (Python Hadoop Spark)
В подразделении "Х5 Технологии" открыто несколько позиций Data engineer
- Прогнозирования спроса: модели машинного обучения и алгоритмы, на основе данных по чекам и остаткам предупреждают сотрудников магазинов о том, что надо проверить/положить товар на полки. Продукт прошел стадию пилот (600 магазинов) и теперь дорабатывается и масштабируется на 15+ тыс. магазинов. Команда: ?10 человек
Стек: Python (FastAPI), Hadoop, Spark, PostgreSQL + Clickhouse, Kafka. Docker, K8s, GitLab. Микросервисная архитектура. - «Планирование ассортимента». Поддержка принятия решений. +ML-алгоритмы выбора товаров для магазина в зависимости от локации и соц.дем. >15 000 магазинов
Проект в стадии развития и масштабирование проекта. Команда: ?10 человек
Стек: Python 3.5-3.8., Fastapi, Hadoop, PySpark + Airflow. PostgreSQL, Kafka, Kibana, ElasticSearch. Docker, K8s, GitLab.
Основные задачи (детальнее расскажем на собеседовании):
- Написание пайплайнов по работе с данными с использованием Airflow, Spark (пример: регулярный расчет фичей для модели, построение витрин с данными. их обновление, расчет метрик качества данных для мониторинга)
- Оптимизация расчета фичей для модели для выдерживания SLA при масштабировании продукта под большее количество магазинов
- Настройка мониторинга и алертинга качества данных и фичей с использованием Zabbix, Grafana
- Написание unit тестов (pytest), тестов для различных участков ML пайплайна, участие в код ревью
- Ну обязательно, но будет большим плюсом: опыт работы с ML, выведения ML моделей в продакшн
Мы сможем рассмотреть на вакансию кандидатов, у которых есть:
- Опыт работы с Python от 2 лет
- Опыт с Hadoop, Hive, Spark
- Знание SQL (чтобы писать и оптимизировать запросы)
- Знание классических алгоритмов и структур данных
- Опыт работы с docker (kubernetes, pyspark, airflow и ds фреймворков python– не обязательно, но будет плюсом)
- Умение пользоваться git'ом и работать в команде
Мы предлагаем:
- Схему мотивации: Fix + годовой бонус (20% годового оклада)
- Удобный офис у м. Парк Культуры или удаленную работу
- Гибкий график работы (с 8/9/10 утра)
- Обратная связь, возможность профессионального и карьерного роста (2 раза в год оценка персонала)
- Возможность обучаться и сертифицироваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, отраслевые конференции, программа развития управленческих навыков, очные мастер-классы, платформы онлайн-образования и многое другое
- Яркую корпоративную жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации
- Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья
- Скидки в магазинах сети Х5 («Пятёрочка», «Перекрёсток», «Карусель»)
- Программу привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров)
- Материальную помощь сотрудникам, попавшим в сложную жизненную ситуацию
Присоединяйся к одной из самых быстрорастущих цифровых команд России!
X5 Retail Group. Создавай новый ритейл
Откликнуться на эту вакансию: Data engineer (Python Hadoop Spark)
Предыдущая вакансия:
Вакансия № 19946969 на должность Администратор от компании syncreon RUS в городе (населенном пункте) Апрелевка