Senior Data engineer

з/п не указана

Требуемый опыт работы: 3–6 лет

Полная занятость, полный день

Привет!
Спасибо, что заглянул на страничку нашей вакансии.
Знаешь, почему весь мир все еще не трубит об IT в Ленте? Первое правило клуба.
Но именно для тебя мы готовы немного приоткрыть завесу тайны.
IT-департамент Ленты — это команда сильнейших профессионалов, которые реализуют проекты федерального масштаба. Мы решаем задачи, о которых в других компаниях еще даже не задумываются. Хочешь вместе с нами работать над прорывными решениями? Добро пожаловать в клуб!

«ЛЕНТА» – федеральная розничная сеть, занимающая первое место в России по количеству гипермаркетов. Наши информационные системы перерабатывают огромные объемы информации от движения автотранспорта до покупки товара покупателем.

Ищем Senior Data инженера для работы с большими объемами данных, open source решениями и сложными задачами.

Используем Hadoop (MapReduce, HDFS, Spark, Kafka, YARN), БД Oracle, БД Hana, SAP DS - ETL, открыты к новым идеям и технологиям.

О проекте:

Совместно с командой Data Scientists и Data инженеров внедряем платформу управления продуктивными решениями Machine Learning с мониторингом производительности, качества моделирования и непрерывностью работы.

Примеры задач:

прогнозирование клиентского поведения, управление логистикой на основе Big Data, персонализация покупательского опыта, ценообразование - на основе Machine Learning.

Вам предстоит:

  1. Заниматься разработкой витрин данных, разработкой и поддержкой средств мониторинга, обеспечивать качество и стабильность данных. Развивать средства донесения результатов скоринга до конечных заказчиков (api и пр.).
  2. Осуществлять поддержку аналитиков по вопросам выборки данных из хранилища. Поддерживать проекты по машинному обучению и ad-hoc.
  3. Внедрять инструменты для быстрой имплементации результатов работы ML в разные функции бизнеса.

Какие навыки нужны:

  • опыт программирования от 4-х лет на SQL, Python, Scala - будет плюсом
  • опыт автоматизации ETL процессов и работы с системами событийной аналитики (JMS или Kafka)
  • опыт работы со Spark
  • знание подходов к оптимизации big data в классических бд: партицирование, распараллеливание, знание отличий от OLTP баз: staging/dwh, etl/elt, отключение индексов/FK, bloom filter, data locality.
  • знание принципов проектирования баз данных (реляционных и нереляционных)

Будет плюсом:

  • понимание основных элементов экосистемы Hadoop: MapReduce, HDFS, Kafka, YARN и др.
  • опыт работы с Kubernetes
  • опыт работы с платформами автоматизации/индустриализации ML (e.g. H2O, Cloudera DSW и пр.)

Тебя ждет:

  • активное участие в реализации значимых Big data проектов в одной из лидирующих розничных сетей
  • возможность самостоятельно принимать решения по архитектуре и стеку
  • дружный коллектив профессионалов с европейской корпоративной культурой
  • программа личного развития, включающая внешнее и внутреннее обучение
  • гибридный режим работы (до 90% удаленной работы)
  • годовое премирование на основании результатов оценки деятельности

А также:

  • ДМС класса Люкс со стоматологией
  • компенсация мобильной связи
  • оформление по ТК РФ, полный спектр социальных льгот
  • скидка на занятия с репетитором по английскому языку
  • скидки на фитнес, возможность заниматься корпоративным спортом (футбол, волейбол)

Конечно же, мы предоставим все условия для комфортной работы

  • Достойную зарплату, премии и бонусы
  • Отличный офис со своей велопарковкой в Приморском районе
  • Гибкое начало рабочего дня
  • ДМС со стоматологией
  • Многоуровневую систему обучения и развития

Вакансия опубликована 19 июня 2021 в Москве

Похожие вакансии