Data Engineer
Требуемый опыт работы: 1–3 года
Полная занятость, удаленная работа
Санкт-Петербург
О нас:
Data Driven Lab – высокотехнологичная продуктовая компания с головным офисом в Белграде. Сегодня наша команда насчитывает более 450 человек в 15 странах. Основные регионы присутствия DDL – Азия, Южная Америка, Африка, Европа и Океания.
Мы используем передовые практики и реализуем масштабные проекты: наши продукты переведены на 21 язык и представлены более чем в 150 странах. Наши решения основаны на анализе данных, исследованиях и стремлении к тому, чтобы стать еще эффективнее. В своей работе мы используем современные аналитические инструменты, прогрессивные методы, передовые технологии и ML.
Тебе предстоит:
- Проектирование решения DWH / DataLake (на базе облачного Databricks), участие в проработке архитектуры и логики сервисов сбора данных совместно с командами разработки и аналитики
- Создание интеграционных сценариев для сбора, хранения, обработки, очистки и обогащения данных. Желательно иметь опыт с полным циклом работы с данными (CRISP-DM)
- Валидация, оптимизация и внедрение моделей расчета аналитических показателей
- Создание и поддержка ETL-процессов, настройка сопутствующего мониторинга и алертинга, контроль качества доставки данных
- Описание моделей данных, их происхождения; составление сопутствующей документации
- Контроль доступа к данным и мониторинг безопасности данных в облачном хранилище
- Разработка механизмов нормализации очистки/дедупликации необработанных данных на этапах ETL-трансформации или загрузки данных в хранилище
- Поддержка по части технических проблем и потребностей, связанных с данными облачного хранилища
- Активное взаимодействие с разными командами аналитиков внутри компании
Основная задача проекта: построение прогнозных моделей вероятности
конверсий в депозиты и размеров Revenue, LTV и CAC, а также других аналитических
решений для финансовых KPI компании.
Мы ожидаем от тебя:
- Релевантный опыт работы от 2х лет в роли Data engineer
- Опыт работы с базами данных и хранилищами широкого профиля (PostgreSQL, MySQL, MongoDB, Elasticsearch, Greenplum)
- Опыт применения языков программирования (Scala, Python) для обработки больших массивов данных (Jupyter Notebooks, Scala, Hadoop,BigQuery)
- Опыт преобразования сырых данных (событийных) согласно бизнес-логике заказчика в табличные данные для аналитики
- Опыт построения и оптимизации ETL-процессов, включающих множество трансформаций
- Самостоятельность, творческий и аналитический подход к решению задач.
Будет плюсом:
- Экспертный уровень владения языком запросов SQL
- Опыт работы с брокерами сообщений (Kafka, RabbitMQ), понимание принципов построения отказоустойчивых кластеров
- Опыт работы с облачными решениями (GCP/Azure) и их администрирование (DevOps, Solution Architect)
С каким стеком предстоит работать:
- Databricks с интеграцией в инфраструктуру GCP
- PostgreSQL
- Apache Airflow, DBT
- Kafka, RabbitMQ
- Scala, Python, SQL
- Jira, Confluence, Git
Мы предлагаем:
Релокацию. Возможность релокации в Сербию (на нас: билеты, аренда жилья, подъемные, полное сопровождение официального оформления).
Стабильность. Конкурентная з/п в евро, продвинутая система бенефитов (медицина, спорт)
Развитие экспертизы. Возможности для нетворкинга, обмена опытом, внутреннего и внешнего обучения за счет компании.Возможность писать статьи и получать за это вознаграждение, выступать на профильных мероприятиях.
Возможность влиять на результат. Отсутствие бюрократии и необходимости большого количества согласований. Можно легко повлиять на развитие и выстраивание глобальных процессов.
Комфортные условия. Гибридный график – можно совмещать работу в офисе с удаленкой.
Welcome to DDL!
Ключевые навыки
Задайте вопрос работодателю
Где располагается место работы?Какой график работы?Вакансия открыта?Какая оплата труда?Как с вами связаться?Другой вопрос
Вакансия опубликована 1 февраля 2023 в Санкт-Петербурге
Отзывы о компании
67%
Что говорят сотрудники
Своевременная оплата труда
Наличие кухни, места для обеда
Оплата больничного
Похожие вакансии
Data Engineer (удалённо)
до 180 000 руб.Санкт-Петербург