Middle Python Developer в команду Data Catalog, платформа ML Space

з/п не указана

Требуемый опыт работы: 1–3 года

Полная занятость, полный день

Cloud
4,5

Санкт-Петербург

Приглашаем Backend Developer (уровень middle/middle+) в команду Data Catalog, которая занимается развитием продукта ML Space - для ML-разработки полного цикла: от трансфера и хранения Big Data до деплоя и автоматического масштабирования готовой модели.

Это единственная в мире платформа с возможностью распределенного обучения на 1700+ GPU Tesla V100 и А100 - благодаря суперкомпьютерам Christofari и Christofari Neo.
Подробнее о платформе ML Space: https://sbercloud.ru/ru/aicloud/mlspace

Команда Data catalog занимается разработкой продуктов для:

- Хранения огромных объемов данных (файловые и объектные хранилища, их файловые менеджеры);
- Миграции данных с коннекторами к различным источникам (S3, базы данных, HDFS);
- Управления артефактами, включая специализированные хранилища ML-артефактов с их версионированием (регистры образов, моделей, датасетов);
- Процессов, связанных с Big Data - ETL/ELT, EDA и др.;
- Оркестрации цикла ML-разработки на собственном движке для создания пайплайнов.

Стек технологий: Python, FastAPI, Apache Airflow, PostgreSQL, ClickHouse, Redis, Kafka, Docker, Kubernetes.

Как мы работаем:

  1. У нас продуктовая компания и кросс-функциональные команды

  2. Используем Jira, Confluence, GitLab как основные средства разработки

  3. Ведем разработку по Scrum

Что мы предлагаем:

  • Работу без легаси с Python 3.9, FastAPI, SQLAlchemy

  • Возможность проектирования сервисов с нуля и участия в процессе разработки “от” и “до”

  • Работу в заряженой экспертной команде, а также в комьюнити архитекторов и разработчиков компании и партнеров

Вам предстоит:

  • Разработка и поддержка существующих решений;

  • Участие в проектировании, разработке и поддержке высоконагруженных сервисов/микросервисов;

  • Code review, юнит-тесты;

  • Анализ инцидентов;

  • Взаимодействие со смежными командами для проработки общего технического решения;

  • Документирование разрабатываемых продуктов.

Требования:

  • Навыки разработки cloud-native сервисов;

  • Знакомство с Kubernetes;

  • Хорошие навыки работы с Docker;

  • Отличное владение Python, умение работать с асинхронным кодом;

  • Знание классических алгоритмов и структур данных;

  • Опыт работы с реляционными базами данных.

Большой плюс:

  • Знание стека Big Data, понимание ETL/ELT процессов (ключевые слова: Apache Airflow, Spark Streaming, Hadoop, HDFS, Kafka);

  • Опыт работы с Apache Airflow;

  • Опыт интеграции решений Big Data;

  • Навыки работы с golang;

  • Опыт проектирования и разработки сервисов с большой нагрузкой с нуля;

  • Понимание бизнес-процессов, умение преобразовывать бизнес-задачи product-менеджера в декомпозированные задачи;

  • Опыт создания пайплайнов данных / моделей машинного обучения (через StreamSets/Ni-Fi, AWS SageMaker).

    Что мы предлагаем:

  • Оформление в соответствии с трудовым законодательством РФ;

  • Конкурентный уровень дохода (оклад + годовой бонус);

  • ДМС со стоматологией и возможностью подключения к программе своих детей и родственников;

  • Прозрачную систему мотивации, которая позволяет влиять на уровень дохода;

  • Работу в команде профессионалов;

  • Участие в создании инновационных продуктов;

  • Гибкое начало рабочего дня, пятница - сокращённый рабочий день;

  • Возможность работать удаленно;

  • Офис в центре Москвы;

  • Корпоративную мобильную связь;

  • Льготную программу ипотечного и потребительского кредитования.

Ещё у нас:

  • Возможность вертикального и горизонтального роста;

  • Бонусные программы от компаний партнёров;

  • Возможность получения бонуса за закрытие вакансии по вашей рекомендации;

  • Материальная помощь при рождении детей и др. семейных обстоятельствах;

  • Обучение в Корпоративном университете за счёт компании;

  • Участие в профильных конференциях в качестве спикера или слушателя;

  • Корпоративная жизнь: спортивные комьюнити, клубы по интересам (настолки, интеллектуальные игры).

Ключевые навыки

Spark
Python
PostgreSQL
Hadoop
ClickHouse
Kubernetes
Docker
Big Data
Kafka
golang

Задайте вопрос работодателю

Он получит его с откликом на вакансию

Где располагается место работы?Какой график работы?Вакансия открыта?Какая оплата труда?Как с вами связаться?Другой вопрос

Вакансия опубликована 24 марта 2023 в Санкт-Петербурге

Отзывы о компании

4,5отлично
Оценка Dream Job

88%

Рекомендуют
Ваши отзывы помогают людям принимать взвешенные карьерные решения
Оставить отзыв

Что говорят сотрудники

Преимущества и льготы
  • 5
    Наличие кухни, места для обеда
  • 4
    Своевременная оплата труда
Маркетолог
Март 2023
- очень классный коллектив, дружные весёлые ребята - ген.директор - милашка
Войдите, чтобы увидеть все отзывы
Войти

Похожие вакансии

Разрабатывать сервис учета действий клиентов. Проектировать и развивать функционал системы уведомлений для клиентов. Оптимизировать скорость работы и эффективность реализованного функционала.
Опыт коммерческой разработки на Python >3.5. Опыт разработки с учетом постоянно обновляющихся требований. Опыт работы с базами данных (в...
Проектирование архитектуры и внешних интерфейсов backend для высоконагруженных веб-приложений. Разработка backend для runtime-сервисов, использующих машинно-обученные модели.
Опыт разработки backend на Python (3+ года). Знакомство с промышленными фреймворками машинного обучения (PyTorch, TensorFlow). Опыт разработки многопоточных приложений.
Разработка модулей обработки (парсинга) данных от источников данных. Разработка и сопровождение аналитических модулей на базе технологий анализа больших данных (в...
Опыт разработки прикладного ПО на Python3 в парадигме ООП не менее 3-х лет. Опыт разработки асинхронных и многопоточных...
Работодатель сейчас онлайн

Backend Developer на Python

от 150 000 руб.
Санкт-Петербург
Проектированием программных решений. Разработкой ПО. Написанием тестов. Работаешь с Redis, Elastic и иными noSQL-решениями. Работаешь с брокерами очередей Celery...
Обладаешь знаниями: Имеешь опыт работы с Django. Знаешь ООП, имеешь представление о SOLID. Работаешь с git. Работаешь с SQL.
Проектирование и реализация микросервисной архитектуры. Разработка микросервисов. Поддержка и доработка действующих проектов. Формирование агрегированной статистики по заданным параметрам из СУБД...
Опыт коммерческой разработки от 3 лет. Уровень не ниже сильного middle или senior. Коммерческий опыт работы с асинхронными фреймворками.
Мы разрабатываем комплексную систему оптимизации и контроля , которая будет использоваться для проведения внутреннего аудита процессов. Разработка для рынка США.
Желательный техстек и инструменты: Python, NLTK, OpenCV, Sphinx, GIT, Pandoc, FastAPI, OpenAPI, K8S, Docker, Linux, Jira.