Город: Москва
Занятость: Полная
Опыт работы: От 3 до 6 лет
Команда AI-Hub Блока Финансы создает и поддерживает платформу для разработки, хранения и исполнения ML-моделей и AI-агентов. Мы обеспечиваем централизованные API для взаимодействия с моделями и инструменты разработки, соответствующие требованиям архитектуры и кибербезопасности Сбера.
В связи с развитием направления пакетной обработки данных, мы ищем специалиста, который возьмет на себя развитие инфраструктуры для эффективного исполнения моделей на Hadoop/Spark и интеграции с корпоративными витринами данных.
Обязанности
- Разработка и поддержка CI/CD пайплайнов для пакетного исполнения ML-моделей (Hadoop, PySpark) и онлайн исполнения (REST API)
- Работа с подписками и витринами данных: настройка процессов получения, обработки и публикации данных для обучения и инференса моделей
- Построение инструментов самообслуживания для вывода моделей в продакшн
- Настройка и поддержка Kubernetes манифестов, service mesh и систем балансировки нагрузки
- Интеграция ML-сервисов с корпоративной инфраструктурой: подключение к базам данных, Kafka, системам авторизации и подпискам на данные
- Автоматизация рутинных операций по управлению инфраструктурой и процессами (Groovy, Python)
- Обеспечение работоспособности тестовых стендов и внедрение quality gate для контроля качества моделей
Требования
- Глубокий опыт в MLOps: уверенное владение инструментами пакетного исполнения ML-моделей (Hadoop, PySpark). Опыт вывода online ML-сервисов и online inference моделей (REST API)
- Практический опыт работы с корпоративными витринами данных и системами подписок на данные
- Опыт работы с PostgreSQL, OpenSearch, Kafka
- Опыт работы с Docker и Kubernetes
- Уверенное владение Python для автоматизации и разработки ETL-процессов
- Опыт работы с Jenkins и/или ArgoCD, понимание концепции pipeline-as-code
- Готовность одновременно работать с инфраструктурой, кодом пайплайнов и процессами (DevOps подход)
Будет плюсом:
- Опыт промышленной разработки сервисов на Python (FastAPI и др.)
- Базовое понимание оркестрации (Helm)
- Опыт работы с векторными базами данных (Chroma, Elasticsearch, аналоги)
- Практика GitOps и управление инфраструктурой через Git
- Опыт разработки microservices architecture для ML-приложений
- Навыки написания и поддержки технической документации
Условия
- формат работы- офис/ возможен гибрид после испытательного срока, Вавилова 19
- ежегодный пересмотр зарплаты, годовой бонус
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера
- корпоративная пенсионная программа.
Похожие вакансии