от компании (организации): Ozon Информационные технологии в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Программирование, разработка"
с заработной платой: по договоренности
Вакансия № 20191248 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Четверг, 10 октября 2024 года.
Дата обновления вакансии № 20191248 на сайте Работа в Москве и Московской области (МО, Подмосковье): Пятница, 15 ноября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 20191248 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
1–3 года
Тип занятости:
полная занятость
График работы:
полный день
Дополнительные сведения о вакансии: Data Engineer, Обработка и хранение данных
В компании мы выводим работу с данными на новый уровень и развиваем собственный event sourcing фреймворк для наполнения хранилища данными из микросервисов.
Что вам предстоит:
- Разработка инструментов для доставки и обработки данных (scala, akka-stream, cats, spark, python);
- Поддержка и развитие существующих инструментов на базе Hadoop (hadoop3, hdfs, yarn, hive);
- Разработка spark приложений для обработки данных;
- Поддержка и развитие существующих решений на Airflow (Celery Executor, k8s);
- Поддержка и развитие существующих решений на Kafka;
- Участие в проектировании архитектуры разрабатываемых решений;
- Участие в выборе используемых технологий и компонентов;
- Внедрение и сопровождение технических решений;
- Документирование разрабатываемых решений.
Что мы ожидаем от вас:
- Уверенное владение Python (PySpark), Java или Scala;
- Опыт разработки многопоточных приложений;
- Понимание принципов функционального программирования;
- Опыт написания тестов;
- Опыт работы с СУБД (Postgre SQL/MS SQL);
- Опыт работы с аналитическими БД (Vertica/Greenplum/BigQuery/Redshift/Synapse);
- Опыт работы с Kubernetes, Kafka, git;
- Понимание JVM (threads, OOM).
Будет плюсом:
- Интерес к построению архитектуры на основе больших горизонтально масштабируемых БД (Vertica, Clickhouse);
- Опыт работы в области Hadoop cтека (Impala, HBase) или других KV-хранилищ;
- Опыт работы с системой мониторинга Prometheus.
Что мы предлагаем:
- Динамичный и быстроразвивающийся бизнес, ресурсы, возможность сделать вместе сделать лучший продукт на рынке e-commerce;
- Свободу действий в принятии решений;
- Достойный уровень заработной платы;
- Профессиональную команду, которой мы гордимся;
- Возможность развиваться вместе с нашим бизнесом.
Откликнуться на эту вакансию: Data Engineer, Обработка и хранение данных
Предыдущая вакансия:
Вакансия № 20191231 на должность Senior Frontend React developer (Амеркианский инвестфонд) от компании ООО Финдев в городе (населенном пункте) Москва