от компании (организации): Kelly Services в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Web инженер"
с заработной платой: до 260000 руб.
Вакансия № 19580751 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Суббота, 14 сентября 2024 года.
Дата обновления вакансии № 19580751 на сайте Работа в Москве и Московской области (МО, Подмосковье): Вторник, 24 сентября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 19580751 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
3–6 лет
Тип занятости:
полная занятость
График работы:
полный день
Дополнительные сведения о вакансии: Data engineer
-Kelly - международная компания, предоставляющая решения по управлению персоналом с 1946 года в мире и с 1993 года в России. Девиз Kelly - люди, а не кандидаты. Компанию делают талантливые люди. Мы эксперты по талантам. Наш бизнес построен на понимании того, какой набор навыков и какой тип кандидата лучше всего подходит организации. И мы знаем, какие компании предлагают подходящую среду для развития уникальных навыков наших кандидатов. Мы верим в людей. В их уникальные таланты. В их скрытые возможности. В способность критиковать и сомневаться. И мы делаем все возможное, чтобы помочь им найти работу своей мечты. Благодаря нам уже более полумиллиона людей во всем мире нашли такую работу. Постройте свою самую успешную карьеру с Kelly!
Обязанности работника на вакансии: Data engineer
Чем предстоит заниматься:
- Разработка продакшен-пайплайнов обработки данных в одной из областей:
- Сервисы товарных рекомендаций, data-driven merchandising, персонализация;
- Прогнозные модели и системы автоматизации планирования и управления ассортиментом, ценами и промо.
- Индустриализация прототипов команды Data Science в одной из перечисленных областей.
- Техническое документирование разработок.
- Третья линия поддержки пайплайнов.
Требования к квалификации:Что мы ждем от кандидата:
- Реляционные СУБД (PostgreSQL, в идеале еще и Greenplum): проектирование структур таблиц, работа с большими объемами данных (> терабайта), умение писать и оптимизировать сложные SQL-запросы (CTE, подзапросы, джойны, агрегация, оконные функции), хранимые процедуры (функции), умение читать и понимать план запроса.
- Уверенное знание Python 3:
- ООП, магические методы, перегрузка, наследование (super);
- Понимание структур данных (список, словарь, set, отличие базовых операций с ними по степени сложности).
По pandas требуется:
- Уверенное знание API pandas;
- Умение векторизировать вычисления (избегать циклов);
- Оптимизация кода по памяти.
- Опыт написания промышленных пайплайнов обработки данных, содержащих множество шагов, зависимостей и сложную логику.
- Умение разбираться в чужом коде (понимание кода, refactoring, code review).
- Linux (базовый опыт: командная строка, shell, работа с файлами, процессами, мониторинг производительности).
- Опыт работы с системами контроля версий (в идеале - командная разработка в git (GitLab, GitHub), умение работать с git в командной строке, работа с merge request'ами, решение merge conflict'ов).
- Приветствуется понимание принципов CI / CD, знание подходов к проектированию хранилищ данных, а также опыт работы с:
- MPP СУБД (Greenplum, Teradata, Vertica), понимание дистрибуции и партиционирования данных;
- Docker, Kubernetes;
- Инструментами для разработки и оркестрации пайплайнов (Apache Airflow, Luigi);
- Облачными технологиями (в частности, S3);
- дебагом утечек памяти в Python (pandas; на стыке DS и Python);
- PySpark, Dask, Modin.
Технический стек: Greenplum, PostgreSQL, Python (pandas, Modin), GitLab, Linux, Docker, Kubernetes, Yandex.Cloud.
Образование: высшее
Условия работы:Мы предлагаем:
- Полностью удаленная работа в динамично растущем подразделении (прирост в 2 раза за 2020-й год) над новыми интересными проектами, связанными с Data Science.
- Минимум бюрократии и legacy-кода.
- Проектная работа (в команде есть data science, data engineers, ETL, Python- и frontend-разработчики, архитекторы, аналитики, тестировщики).
- Возможности профессионального и карьерного роста (регулярные performance review), ротации в смежные специальности.
ДМС: да
Фитнес: да
Обучение, тренинги: да
Откликнуться на эту вакансию: Data engineer
Предыдущая вакансия:
Вакансия № 19580750 на должность Портфельный аналитик от компании ANCOR в городе (населенном пункте) Москва