Технологии и команда экспертов мирового уровня
Каждый день сотни IT-команд Яндекса решают сложные, уникальные и интересные технологические задачи. У нас можно работать в разных командах с разной продуктовой культурой и атмосферой: в больших хайлоад-сервисах и небольших внутренних стартапах. Все специалисты влияют на развитие продукта, помогают встраивать и развивать топовые технологии в сервисах, которые делают жизнь миллионов людей лучше.
- Сильная команда, с которой можно расти и самому стать экспертом мирового уровня
- Возможность поработать с разными командами над разными задачами и продуктами
- Участие в разработке технологий, которые влияют на мировую
IT-индустрию - Культура инноваций и создание по‑настоящему уникальных продуктов и сервисов
О вакансии
У Яндекс Финтеха одно из крупнейших хранилищ банковских данных в облаке в России. В ближайший год объём данных вырастет в 10 раз, и мы хотим построить платформу, которая сможет эффективно и качественно обрабатывать петабайты данных.
Какие задачи вас ждут
- Создание и поддержка инструментов DWH
Вы будете создавать новые и поддерживать существующие инструменты для построения DWH. Ваша задача — разработать масштабируемую и надёжную архитектуру сервисов обработки данных, удобные и эффективные инструменты для этих сервисов, обеспечить высокое качество и целостность данных, а также оптимизировать производительность.
- Разработка и поддержка инфраструктуры для обработки данных
Вам нужно будет проектировать и оптимизировать облачную инфраструктуру для обработки данных, разрабатывать эффективные пайплайны для развёртывания сервисов в облаке, анализировать нагрузку на сервисы и улучшать их работу, повышать качество сервисов и сокращать время обработки данных.
- Реконсиляция данных
Вам предстоит разрабатывать и поддерживать процессы сверки данных, чтобы обеспечивать высокое качество и доступность банковской отчётности, аналитических витрин и мониторинговых дашбордов. Это позволит эффективно отслеживать ключевые метрики, быстро находить и устранять проблемы в работе хранилища данных и обеспечивать стабильную работу банка.
- Сотрудничество с командами
Вы будете тесно взаимодействовать с разработчиками, аналитиками, продакт-менеджерами и другими специалистами, собирать требования к данным и сервисам обработки данных и внедрять их в DWH.
Мы ждем, что вы
- Работали дата-инженером или разработчиком бэкенда/инфраструктуры
- Разрабатывали и поддерживали сервисы в Kubernetes
- Знаете технологии для обработки больших данных (Spark и Airflow) и для хранения и передачи данных (S3, Greenplum, PostgreSQL, ClickHouse, Oracle и Kafka)
- Знакомы с форматами хранения данных Apache Hudi
- Хорошо владеете SQL (опционально YQL)
- Владеете Python (опционально Kotlin/Java)
- Умеете быстро превращать бизнес-задачи в production-ready технические решения
Будет плюсом, если вы
- Работали с Yandex Cloud (Yandex Data Processing, Yandex Data Sphere, Yandex Data Lens, Yandex Data Transfer)
- Взаимодействовали со стриминговыми технологиями (Spark Streaming, HoodieDeltaStreamer, Debezium, Apache Flink, Apache Pulsar, Trino)
Что мы предлагаем
Премии каждые полгода для всех, кто успешно прошёл ревью.
В офисах есть всё, что нужно для комфортной работы: удобные рабочие зоны, уютные места для отдыха, кофепойнты для спокойных перерывов.
В офисах в Москве, Санкт-Петербурге, Екатеринбурге, Новосибирске, Казани и Нижнем Новгороде есть тренажёрные залы со всем необходимым.
Начинает работать с первого месяца. В неё входят:
- плановая и неотложная помощь, стоматология, расширенный превентивный чекап, телемедицина 24/7;
- психотерапия в онлайн-сервисах наших партнёров;
- после года работы добавляется лазерная коррекция зрения, после двух — ведение беременности и роды.
Также мы покрываем 80% стоимости ДМС для супругов и детей.
Есть всё, чтобы учиться: внутренняя платформа с 100+ курсами, менторство и программы для руководителей.
Оплачиваем участие в профильных конференциях и помогаем подготовиться к публичным выступлениям.
Если для работы нужен иностранный язык, поможем организовать обучение и оплатим 50% стоимости.
Делаем закрытые мероприятия: вечеринки, фестивали и другие ивенты.
В Яндексе много клубов по интересам, Random Coffee, сервисы для знакомств и взаимопомощи. А наши спортивные клубы регулярно участвуют в забегах, триатлонах и других соревнованиях.
На портале скидок масса специальных предложений для сотрудников от наших партнёров.
Ключевые навыки
- Python
- SQL
- S3
- Spark
- Apache Airflow
- Greenplum
- PostgreSQL
- Clickhouse
- ORACLE
- Kafka
- Kotlin
- Java
- Yandex Cloud
- Spark Streaming
- Kubernetes
- Apache Hudi