Lead Data Engineer

з/п не указана

Требуемый опыт работы: 3–6 лет

|

Полная занятость, удаленная работа

Эта вакансия предполагает обязательную релокацию из России и Беларуси с возможностью работы в одном из наших офисов в Ирландии, Португалии, Кипре, Сербии, Черногории, Армении, Казахстане, либо удаленно из других стран.

В игры Playrix уже играют миллионы людей ежедневно. Чтобы это число превратилось в миллиард, мы активно вкладываемся в создание мощной автоматизированной системы по работе с креативами на рекламных каналах.

Наша команда занимается разработкой и поддержкой программных продуктов для извлечения, трансформации, выгрузки и анализа данных.

Объем данных в нашем Data Lake больше 2.5 петабайт: маркетинговые метрики, игровые события, параметры операционной деятельности. Мы делаем всё возможное, чтобы не возникало ни малейших сомнений в полноте, актуальности и достоверности информации, которую мы предоставляем. Особое внимание уделяем скорости обработки и качеству данных. Это позволяет нам принимать верные решения относительно развития наших игр!

В нашу команду ищем Lead Data Engineer, готового развивать наши продукты.

Наши задачи

  • подготовка источников данных для заказчика - маркетинг и игровая аналитика;

  • разработка конвейера поставки данных в виде DAG процессов для Airflow/Luigi;

  • внедрение моделей прогнозирования и ML в продакшен

  • интеграция с сервисами партнеров для получения данных от них

  • построение процессов data quality для новых и имеющихся источников.

Наш стек

Наш основной язык программирования — Python. Для доступа к данным используем SQL. Datalake построен на S3, Parquet и Hive. В качестве DWH используем Redshift/PostgreSQL. Работаем в облачной инфраструктуре AWS. Используем решения мейнстримовых вендоров (Databricks, MonteCarlo, DBT). Практикуем serverless подход работы с ресурсами и горизонтальное масштабирование, используем предиктивные модели. Уделяем внимание рефакторингу и кода, и архитектуры. Для CI/CD процесса используем TeamCity.

Мы ожидаем

  • технический бэкграунд в Python от 5 лет: навык проектирования фреймворков и библиотек, умение читать и анализировать код, опыт профилирования и оптимизации производительности/масштабируемости;

  • опыт разработки data-driven приложений, выбора технического стека и субд;

  • навыки работы с популярными DE/ML фреймворками: airflow, pandas, sqlalchemy, tensorflow, mlflow;

  • навыки написания и оптимизации SQL запросов, умение работать с планами запросов, опыт работы с хранилищами разных архитектур: mpp, columnar, relation, hadoop, in-memory;

  • опыт разработки в распределённых средах.

Будет плюсом

  • понимание работы облачных сервисов или знание стека AWS;

  • знание предметной области маркетинга;

  • опыт управления командой от 2 лет (6+ человек).

Мы предлагаем

Заботу о здоровье

Компенсируем онлайн-сессии с психологом, открываем для вас и ваших детей ДМС со стоматологией и лечением от COVID-19. Организуем вакцинацию для тех, кому это важно.

Спорт и фитнес

Поддерживаем здоровый образ жизни и компенсируем покупку любых спортивных абонементов, подписку на фитнес-приложение или участие в марафонах.

Заботу о благополучии

Сохраняем 100% зарплату во время отпуска или больничного без лишних справок. А для особых случаев предоставим дополнительные выходные.

Удобное рабочее место

У нас есть все для комфортной работы, где бы вы не находились. В офисах — зоны отдыха и горячее питание, для удаленных сотрудников — доставка современной техники.

Развитие и обучение

Оплачиваем участие в профильных конференциях и курсах, регулярно проводим внутренние буткемпы и стажировки. А для личного развития предлагаем доступ к тысячам книг в онлайн-библиотеке и скидки на курсы английского языка.

Мероприятия и мерч

Конкурсы, спортивные челленджи, вечеринки, хакатоны и внутренние офлайн-ивенты для команд — каждый год мы проводим сотни мероприятий по всему миру.

Социальные проекты

Запускаем благотворительные проекты и поддерживаем идеи сотрудников в конкурсе грантов.

Ключевые навыки

SQL
Python
MS SQL
PostgreSQL
Airflow
Luigi
Базы данных

Задайте вопрос работодателю

Он получит его с откликом на вакансию

Где располагается место работы?Какой график работы?Вакансия открыта?Какая оплата труда?Как с вами связаться?Другой вопрос

Вакансия опубликована 20 марта 2023 в Санкт-Петербурге

Отзывы о компании

Работодатель скрыл отзывы в нашем приложении, но вы можете посмотреть их на сайте Dream Job
Ваши отзывы помогают людям принимать взвешенные карьерные решения
Оставить отзыв

Похожие вакансии

Откликнитесь среди первых
Проектирование и разработка SQL-процедур, обработчиков данных на Spark (Scala) и ETL-процессов (в т.ч. AirFlow). Оптимизация производительности кода.
Какие знания и навыки для нас важны: Опыт работы с инструментарием Hadoop (HDFS, Yarn, Spark, Hive). Опыт работы с промышленными...
Откликнитесь среди первых
Интересные проекты и современный стек (Celery, FastAPI, Tornado, PostgreSQL, RabbitMQ, Docker. Для разработки используем VS Code, Gitlab, Jira, Confluence).
Нестандартные решения и желание экспериментировать. Успешный опыт в разработке на Python 3.* (скоринговых карт, анти-фрод решений, интеграционной шины).

Senior Back End and DevOps engineer

100 000 – 200 000 руб.
Санкт-Петербург
Откликнитесь среди первых
Agile method and lead scrum cycle. Refactoring and Documentation. Solutions architecture and tech stack including new emerging software engineering technologies.
Crypto Web 3. Good Salary. Candidate must possess at least Bachelor's Degree in Engineering (Computer/Telecommunication) or equivalent.

Senior Computer Vision Engineer

от 300 000 руб.
Санкт-Петербург
Откликнитесь среди первых
Разрабатывать AI-фичи для всех продуктов компании. Проводить анализ предметной области. Обучать нейронные сети. Генерировать и проверять гипотезы: прототипировать идеи...
Опыт работы в области ML не менее трех лет. Знание и опыт применения архитектур для сегментации и детекции объектов, а...
Работодатель сейчас онлайн

Python Middle+/Senior Developer

300 000 – 480 000 руб.
Санкт-Петербург, Петроградская
Разработкой архитектуры, поддержкой, развитием и оптимизацией проектов. Проектированием и развитием архитектуры баз данных. Разработкой новой функциональности и улучшением имеющейся.
Способствовать развитию других членов команды (менторство, передача опыта). Здорово, если вы умеете генерировать идеи, аргументировать, брать ответственность за их воплощение...
Санкт-Петербург
Откликнитесь среди первых
Менеджмент команды С++ программистов (организация, координация, обучение, развитие, оценка результатов работы). Участие в найме и адаптации новых сотрудников.
Опыт разработки игровых проектов, выпущенных в production. Опыт разработки коммерческих проектов на С++ не менее трех лет. Уверенное владение современными...