Data Engineer

з/п не указана

Требуемый опыт работы: 3–6 лет

Полная занятость, удаленная работа

Мы создаем собственную платформу данных, которая включает в себя инструменты по получению, обработке, загрузке и визуализации данных. С помощью этих инструментов мы каждый день загружаем терабайты информации в единое хранилище данных (DWH), приводим ее к удобному виду, предоставляем нашим пользователям и даем возможность на основании их строить важные отчеты, графики, проводить анализ. Часть из этих инструментов мы разрабатываем с нуля, часть - разрабатываем на основе opensource решений, таких как Apache Airflow, NiFi, Zepellin, Flink и других. В нашу команду нужны талантливые дата-инженеры, которые будут развивать продукты Data Platform.

Чем предстоит заниматься

  • Участие в разработке ядра продуктов Data Platform
  • Разработка и оптимизация процессов выгрузки данных

Что вам необходимо

  • Знание одного из языков программирования: Python, Java, Go
  • Знание основ ООП, теории алгоритмов, структур данных
  • Знание SQL
  • Опыт написания процессов загрузки данных (ETL)
  • Будет плюсом знакомство с современными системами хранения данных: MPP, NoSQL
  • Будет плюсом знакомство с: Pandas, Numpy, Groovy
  • Исследовательский склад ума, любознательность, широкий кругозор, желание изучать новые технологии

Мы предлагаем

  • Работу в офисе или удаленно — по договоренности
  • Профессиональное развитие. Вы получите доступ к библиотеке с технической литературой, тренингами и мастер-классами для сотрудников
  • Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким
  • Компенсацию такси, парковки и 50% затрат на спорт от стоимости абонемента
  • Компенсацию обедов. А если захотите перекусить, на каждом этаже есть кухня с чаем, кофе и фруктами
  • Достойную зарплату — обсудим ее на собеседовании

Ключевые навыки

Java
Python
SQL
Git
Java EE
Базы данных
ETL
Greenplum
СУБД
DWH

Вакансия опубликована 13 июня 2022 в Санкт-Петербурге

Отзывы о компании

4,0очень хорошо
Оценка Dream Job

76%

Рекомендуют
Ваши отзывы помогают людям принимать взвешенные карьерные решения
Оставить отзыв о компании

Что говорят сотрудники

Преимущества и льготы
  • Своевременная оплата труда
  • Удаленная работа
  • Гибкий рабочий график
Оператор входящей линии
Август 2021
Очень нравится, что работа дистанционная, планирую график как удобно мне, есть возможность карьерного роста. Доход высокий по сравнению со средним в моем регионе(город Тверь) , есть преимущества для операторов, возможность компенсировать гарнитуру, возможность уходить в неоплачиваемую неактивность, также страхование жизни- совершенно бесплатно!
Войдите, чтобы увидеть все отзывы
Войти

Похожие вакансии

Можно работать из дома
Санкт-Петербург, Чкаловская
2) ETL/ELT. Управление потоками данных, наполнение Data Lake и DWH, создание витрин и подобное. Для этого используются Airflow и...
До конца года мы хотим совсем отказаться от MSSQL и разгрузить Clickhouse от нетипичных для него задач. Для этого мы...
Можно работать из дома
Санкт-Петербург
Проектирование и разработка процессов загрузки данных в единое хранилище данных Apache Hadoop. Оптимизация и настройка производительности ETL процессов (Apache Airflow...
Опыт работы c Linux (Centos/Ubuntu), Docker. Опыт работы с экосистемой Apache (HDFS, Hive/Spark, Apache Airflow). Уверенные знания одного...
Можно работать из дома
Санкт-Петербург
Миграционные задачи: перенос существующих витрин на фреймворк SDP Hadoop. Развитие и внедрение продуктов Сбербанка.
Опыт работы от 2х лет. Навыки программирования на Java. Наличие практического опыта работы с Hadoop (Hive, Impala, sqoop, oozie...
Можно работать из дома
Санкт-Петербург
Работа с большими данными на входе. Развитие культуры визуализации информации. Кросс-валидация по различным источникам. Формирование и ревью схемы данных...
Опыт работы с Tableau. Хорошее знание SQL. Понимание ООП, design patterns. Опыт работы с Docker. Опыт работы с UNIX-based...

Data Engineer

3 500 – 5 700 EUR
Можно работать из дома
Санкт-Петербург
Будьте первыми
Проектирование и разработка систем сбора и хранения аналитических данных на базе Airflow, AWS (Kinesis Firehose, S3, Redshift, Spectrum).
Ожидаемые навыки: Обязательно: Опыт работы с PostgreSQL/Redshift (опыт оптимизации запросов/performance). Apache Airflow или аналоги (Prefect, Luigi, AWS Glue).
Можно работать из дома
Санкт-Петербург
Будьте первыми
Сбор статистических данных из внутренних и внешних источников в наш data-lake на базе Hadoop (по заказу внутренних заказчиков и...
Опыт промышленной разработки на Python. Уверенные знания SQL/оконные функции/CTE. Опыт работы с инструментами экосистемы Hadoop: Hive, Impala.