Краудсорсинг — это способ организации процессов, при котором большая задача разбивается на некоторое количество маленьких, которые передаются исполнителям. Типичный пример краудсорсинговой задачи — разметка изображений для обучения ML-модели. В процессе участвуют две стороны — заказчик, который хочет разметить гигабайты изображений, и исполнители, которые готовы выполнять простые задания за сравнительно небольшую плату. Крауд-платформа является маркетплейсом, позволяющим свести эти две стороны друг с другом.

Отдел внутреннего краудсорсинга (Крауд) помогает сервисам Яндекса решать бизнес-задачи. Мы размечаем данные, занимаемся тестированием, поддержкой пользователей и продажами, модерируем контент, готовим тексты, графику и дизайн. Чтобы эти задачи решать эффективно, необходима дополнительная инфраструктура, которую разрабатывает наша команда.

Например, самый крупный инфраструктурный сервис — Yang (Янг) — внутренняя платформа для распределения и выполнения заданий, которая состоит из более чем 30-ти микросервисов с высокими требованиями к надежности и масштабированию под нагрузкой. Он отвечает как за непосредственно раздачу заданий исполнителям и обработку результатов выполнения заданий, так и за множество вспомогательных функций: внутренний биллинг, антифрод, статистики, интеграции с большим количеством смежных систем и так далее.

Наш стек технологий:

• бэкенд на Java (11 и выше) и Kotlin, Spring Framework (Boot, Security, MVC, Websocket), JooQ;
• микросервисная архитектура;
• все сервисы - cloud-native;
• хранение данных: PostgreSQL, Redis, ClickHouse, S3.

Что нужно делать:

• разрабатывать бэкенд одного или нескольких сервисов в инфраструктуре Крауда;
• писать код с нуля и в существующих сервисах;
• придумывать архитектуру, модель данных, API;
• общаться с аналитиками и менеджером проекта, генерировать идеи и развивать продукт.

Мы ждем, что вы:

• уверенно знаете Java, Kotlin или иной объектно-ориентированный язык, готовы быстро адаптироваться к нашему стеку;
• пишете эффективный, простой и понятный код;
• разбираетесь в ситуации, прежде чем предлагать решение, знаете плюсы и минусы выбранного решения и готовы обосновать его;
• интересуетесь развитием продукта и стремитесь понять, где, как и для кого будет работать ваш код.