Senior Data Engineer/Data Engineer
Требуемый опыт работы: 3–6 лет
Полная занятость, удаленная работа
Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе JVM/Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.
Для участия в разработке аналитической платформы требуется Data Engineer.
Технологический стек:
- Языки программирования: Scala, Python
- Обработка и хранение данных: Spark, Flink, Kafka, ClickHouse, Cassandra, ElasticSearch
- Прочие технологии и фреймворки: Finagle, Jackson, ScalaTest, Docker
Задачи:
- Реализация компонентов платформы, связанных с обработкой больших данных
- Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения
- Формирование и обработка больших наборов данных
- Участие в разработке архитектуры платформы
Наши ожидания:
- Профильное образование: информационные технологии, статистика, математика
- Опыт работы по специальности от 3-х лет (для Senior Data Engineer от 5 лет)
- Опыт разработки на Scala или Java от 1-го года (для Senior Data Engineer от 3-х лет)
- Знание особенностей реализации различных алгоритмов и структур данных
- Опыт работы в команде
Будет плюсом:
- Опыт работы с Apache Spark, Flink, Kafka
- Опыт работы с распределенными БД: Cassandra, HBase, ElasticSearch и т.д
- Глубокое понимание особенностей архитектуры JVM
- Интерес к технологиям Data Science, участие в конкурсах по машинному обучению
Что мы предлагаем:
-
Оформление в соответствии с ТК РФ
- Индивидуальный график для совмещения с научной и преподавательской деятельностью
- ДМС + стоматология
- Корпоративные скидки в фитнес-клуб World Class
- Корпоративный тариф на абонементы FITMOST
- Спортивные мероприятия (турниры по футболу, волейболу, киберспорт, забеги)
- Курсы английского языка, в том числе с носителем языка
- Возможность участия в профессиональных конференциях в России и зарубежом
- Корпоративные скидки в фитнес-клуб World Class
- Внешние курсы, сертифицированное обучение, которые вы выбираете сами
- Экскурсии в Музей криптографии для сотрудников и их семей
- Релокационный пакет для специалистов из других регионов
- Работу дистанционно, в офисе или комбинированный формат
Ключевые навыки
Задайте вопрос работодателю
Где располагается место работы?Какой график работы?Вакансия открыта?Какая оплата труда?Как с вами связаться?Другой вопрос
Вакансия опубликована 27 февраля 2023 в Санкт-Петербурге
Отзывы о компании
100%
Что говорят сотрудники
- Своевременная оплата труда
- Удобное расположение работы
- Удаленная работа