Lead Data Engineer
Санкт-Петербург
Эта вакансия предполагает обязательную релокацию из России и Беларуси с возможностью работы в одном из наших офисов в Ирландии, Португалии, Кипре, Сербии, Черногории, Армении, Казахстане, либо удаленно из других стран.
В игры Playrix уже играют миллионы людей ежедневно. Чтобы это число превратилось в миллиард, мы активно вкладываемся в создание мощной автоматизированной системы по работе с креативами на рекламных каналах.
Наша команда занимается разработкой и поддержкой программных продуктов для извлечения, трансформации, выгрузки и анализа данных.
Объем данных в нашем Data Lake больше 2.5 петабайт: маркетинговые метрики, игровые события, параметры операционной деятельности. Мы делаем всё возможное, чтобы не возникало ни малейших сомнений в полноте, актуальности и достоверности информации, которую мы предоставляем. Особое внимание уделяем скорости обработки и качеству данных. Это позволяет нам принимать верные решения относительно развития наших игр!
В нашу команду ищем Lead Data Engineer, готового развивать наши продукты.
Наши задачи
-
подготовка источников данных для заказчика - маркетинг и игровая аналитика;
-
разработка конвейера поставки данных в виде DAG процессов для Airflow/Luigi;
-
внедрение моделей прогнозирования и ML в продакшен
-
интеграция с сервисами партнеров для получения данных от них
-
построение процессов data quality для новых и имеющихся источников.
Наш стек
Наш основной язык программирования — Python. Для доступа к данным используем SQL. Datalake построен на S3, Parquet и Hive. В качестве DWH используем Redshift/PostgreSQL. Работаем в облачной инфраструктуре AWS. Используем решения мейнстримовых вендоров (Databricks, MonteCarlo, DBT). Практикуем serverless подход работы с ресурсами и горизонтальное масштабирование, используем предиктивные модели. Уделяем внимание рефакторингу и кода, и архитектуры. Для CI/CD процесса используем TeamCity.
Мы ожидаем
-
технический бэкграунд в Python от 5 лет: навык проектирования фреймворков и библиотек, умение читать и анализировать код, опыт профилирования и оптимизации производительности/масштабируемости;
-
опыт разработки data-driven приложений, выбора технического стека и субд;
-
навыки работы с популярными DE/ML фреймворками: airflow, pandas, sqlalchemy, tensorflow, mlflow;
-
навыки написания и оптимизации SQL запросов, умение работать с планами запросов, опыт работы с хранилищами разных архитектур: mpp, columnar, relation, hadoop, in-memory;
-
опыт разработки в распределённых средах.
Будет плюсом
-
понимание работы облачных сервисов или знание стека AWS;
-
знание предметной области маркетинга;
-
опыт управления командой от 2 лет (6+ человек).
Мы предлагаем
Заботу о здоровье
Компенсируем онлайн-сессии с психологом, открываем для вас и ваших детей ДМС со стоматологией и лечением от COVID-19. Организуем вакцинацию для тех, кому это важно.
Спорт и фитнес
Поддерживаем здоровый образ жизни и компенсируем покупку любых спортивных абонементов, подписку на фитнес-приложение или участие в марафонах.
Заботу о благополучии
Сохраняем 100% зарплату во время отпуска или больничного без лишних справок. А для особых случаев предоставим дополнительные выходные.
Удобное рабочее место
У нас есть все для комфортной работы, где бы вы не находились. В офисах — зоны отдыха и горячее питание, для удаленных сотрудников — доставка современной техники.
Развитие и обучение
Оплачиваем участие в профильных конференциях и курсах, регулярно проводим внутренние буткемпы и стажировки. А для личного развития предлагаем доступ к тысячам книг в онлайн-библиотеке и скидки на курсы английского языка.
Мероприятия и мерч
Конкурсы, спортивные челленджи, вечеринки, хакатоны и внутренние офлайн-ивенты для команд — каждый год мы проводим сотни мероприятий по всему миру.
Социальные проекты
Запускаем благотворительные проекты и поддерживаем идеи сотрудников в конкурсе грантов.
Ключевые навыки
Задайте вопрос работодателю
Где располагается место работы?Какой график работы?Вакансия открыта?Какая оплата труда?Как с вами связаться?Другой вопрос
Вакансия опубликована 20 марта 2023 в Санкт-Петербурге