от компании (организации): VK в городе (населённом пункте): Москва, Россия
в отрасли экономики "Информационные технологии, интернет, телеком" → "Сетевые технологии"
с заработной платой: по договоренности
Вакансия № 23601439 добавлена в базу данных сайта Работа в Москве и Московской области (МО, Подмосковье): Понедельник, 4 ноября 2024 года.
Дата обновления вакансии № 23601439 на сайте Работа в Москве и Московской области (МО, Подмосковье): Среда, 13 ноября 2024 года.
Обращаем Ваше внимание, что на момент обращения к работодателю вакансия № 23601439 может быть уже занята. Администрация сайта Работа в Москве и Московской области (МО, Подмосковье) приносит извинения за доставленные неудобства.
Требования к опыту работы:
более 6 лет
Тип занятости:
полная занятость
График работы:
полный день
Дополнительные сведения о вакансии: Data Engineer (команда Big Data Infrastructure)
Мы занимаемся развитием и поддержкой платформы Big Data на vk.com. Она построена как на проверенных решениях с открытым исходным кодом (Hadoop, Kafka, Spark, Zeppelin), так и на собственных разработках, заточенных под работу 24/7 в условиях высоких нагрузок.
Ищем человека, который поможет развивать продукт, внедряя новые решения и дорабатывая существующие.
Вам предстоит:
- развивать платформу хранения и обработки больших данных;
- внедрять новые инструменты для анализа данных и машинного обучения;
- строить новые и оптимизировать существующие глобальные ETL-процессы, преимущественно на Spark?+?Java и Python;
- разрабатывать сервисы, облегчающие работу специалистов Data Science;
- решать различные задачи, связанные с производительностью и отказоустойчивостью инфраструктуры Big Data.
У нас интересно:
- вас ждет тотальный хайлоад — петабайты данных, десятки миллионов пользователей, множество разных продуктов;
- впереди много новых вызовов — мы используем Open Source по максимуму, иногда дорабатывая его, чтобы расширить возможности;
- поддерживаем культуру стартапа, сохраняя преимущества устоявшегося продукта.
Мы ожидаем, что вы:
- имеете опыт работы со свежими версиями продуктов фонда Apache — Hadoop, Kafka, Spark, Zeppelin, Airflow;
- знаете принципы работы баз данных и распределенных систем хранения и обработки данных;
- знаете Bash/Python для автоматизации процессов и Java/Scala для поддержки ETL и внедрения новых сервисов;
- имеете опыт построения и развития инфраструктуры Big Data.
Будет плюсом, если вы знаете ClickHouse/PHP.
Приглашаем специалиста, который готов работать удаленно, в офисе или в гибридном графике. Ждем ваших откликов. Удачи!
Откликнуться на эту вакансию: Data Engineer (команда Big Data Infrastructure)
Предыдущая вакансия:
Вакансия № 23601438 на должность Повара холодного цеха (столовая) от компании ООО Лимонадница в городе (населенном пункте) Москва