Data engineer

з/п не указана
Откликнуться

Требуемый опыт работы: 1–3 года

Полная занятость, полный день

Мы находимся в поиске Data engineer'a, который будет заниматься развитием направлений : Цифровая аналитика "Антифрод", "Инфраструктура DataLake".

Ваши задачи:

  • Реализация ETL в Hadoop (с помощью Airflow).

  • Работа с различными источниками данных: Oracle MS SQL API личных кабинетов, микросервисы.

  • Батч и стримы с помощью PySpark и Kafka.

  • Подготовка витрин для анализа (Hive + Spark+ SQL)

Наш стек: Cloudera hadoop; Kafka, Spark, Airflow; Jira; Confluence; GitLab

Мы ждем от будущих коллег:

  • Уверенное владение Python.
  • Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka,Spark.
  • Знание SQL
  • Опыт работы с реляционными базами данных (Oracle).

Атмосфера:

Став частью Sportmaster Lab, вы получите:

Работаем в удобном формате: 2 дня в офисе, 3 дня дома
Дисконтная карта 30% (Sportmaster, Ostin, Funday)
Обучение как внутри компании, так и у партнеров
Медицинское страхование
за счет компании
Зарплата + полугодовые премии
Ждем тебя в нашей команде!

Ключевые навыки

Python
Kafka
Spark

Вакансия опубликована 4 мая 2022 в Санкт-Петербурге

Отзывы о компании

3,8хорошо
Оценка Dream Job

70%

Рекомендуют
Ваши отзывы помогают людям принимать взвешенные карьерные решения
Оставить отзыв о компании

Что говорят сотрудники

Менеджер по продажам
Май 2022
Близость к дому. Отличное руководство. Выбор графика. .общение с клиентами. Изучение товаров, качества, материалов
Войдите, чтобы увидеть все отзывы
Войти

Похожие вакансии

Karuna
Санкт-Петербург
Поддерживать ETL-процессы команды маркетинговой аналитики: * автоматизированный сбор данных с новых источников. * автоматизация процессов агрегации данных из DWH (Clickhouse, Vertica...
Опыт работы в профильном или смежном направлении 1-3 года. Опыт программирования на Python со знанием библиотек pandas, numpy.
Откликнуться
Devexperts
Санкт-Петербург, Чкаловская
Будьте первыми
Проводить интервью с внутренними заказчиками с целью погружения в бизнес смысл задач, выявлять требования и проблемы, вести описание задач и...
Ожидаемые навыки: Понимание концепции хранилищ данных, знание архитектуры и принципов работы баз данных. Системное мышление в проработке и решении задач.
Откликнуться
Devim
Санкт-Петербург
Будьте первыми
Развивать архитектуру обработки и доставки данных. Наладить поставку данных для продуктовых аналитиков и data science. Проектировать и внедрять ETL / ELT...
Опыт разработки ETL / ELT. Опыт построения витрин данных. Уверенное владение SQL, оптимизация запросов. Знание Clickhouse, Postgres, MS SQL.
Откликнуться
ООО МКК Киберлэндинг
Санкт-Петербург
Документирование потоков данных по существующим и новым источникам данных. Поддержка Apache Airflow и Pentaho. Настройка загрузки данных из различных источников.
Понимание моделей данных и принципов устройства хранилищ данных. Хорошее знание SQL. Опыт работы хотя бы с одной промышленной БД.
Откликнуться
Можно работать из дома
Playgendary
Санкт-Петербург
Работа с большими данными на входе. Развитие культуры визуализации информации. Кросс-валидация по различным источникам. Формирование и ревью схемы данных...
Опыт работы с Tableau. Хорошее знание SQL. Понимание ООП, design patterns. Опыт работы с Docker. Опыт работы с UNIX-based...
Откликнуться
Можно работать из дома
Тинькофф
Санкт-Петербург
Участие в разработке ядра продуктов Data Platform. Разработка и оптимизация процессов выгрузки данных.
Знание одного из языков программирования: Python, Java, Go. Знание основ ООП, теории алгоритмов, структур данных. Знание SQL. Опыт написания процессов...
Откликнуться