MLOps и сопровождение моделей
Настраиваем контур, в котором модель живёт после запуска: воспроизводимое обучение, версионирование, деплой, мониторинг качества и регламент дообучения.
Какую задачу закрывает
Точность модели снижается со временем, потому что меняется то, что она наблюдает: новая упаковка, другая спецодежда, сдвинутая камера, сезонное освещение. Без мониторинга падение замечают по жалобам пользователей, когда доверие к системе уже потеряно.
Вторая проблема - ручной выпуск: модель обучили на чьём-то ноутбуке, и через полгода никто не может повторить результат.
Что делаем
- Пайплайны обучения и автоматический деплой
- Версионирование моделей и датасетов
- Мониторинг качества в проде и оповещение при деградации
- Регламент дообучения на накопленных данных
- Инфраструктура инференса, включая ускорение на видеокартах
Как работает
Каждая модель связана с версией датасета и параметрами обучения, поэтому любой результат воспроизводится. Новая версия сначала проверяется на отложенной выборке и только потом выкатывается.
В эксплуатации следим за распределением входных данных и долей подтверждённых срабатываний. Когда показатели уходят за порог, приходит оповещение, а накопленные кадры попадают в очередь на разметку и дообучение.
Инфраструктура
Работаем на вашем железе, в вашем облаке или в смешанной схеме, где инференс идёт на объекте, а обучение - централизованно. Для видеоаналитики настраиваем TensorRT, Triton или DeepStream под конкретные видеокарты.
Что вы получаете
Воспроизводимое обучение, автоматический выпуск моделей, мониторинг качества с оповещениями, регламент и инструменты дообучения, документацию.
Сроки
Аудит текущего контура - около недели. Настройка пайплайнов и мониторинга для одной модели - от трёх недель.
Частые вопросы
Подойдёт ли это для моделей, которые делали не вы?
Да. Начинаем с аудита: как модель обучалась, где лежат данные, как она выкатывается. После этого переносим её в общий контур.
Опыт наших клиентов
Мой проект - тематический сайт знакомств. Я оцениваю его как проект высокого уровня сложности: очень непросто найти разработчиков, которые могли бы его реализовать. Я работал с командой Глеба в течение более двух лет с перерывами, которые были связаны исключительно с моим финансовым состоянием. По итогу могу сказать, что вполне доволен проделанной работой. Ребята знают своё дело, с хорошей коммуникабельностью, и всегда помогут советом. В данный момент вся основная работа сделана, сайт находится в рабочем состоянии и набирает пользователей. Есть идеи по добавлению новых функций, и если я решусь на это, то буду реализовывать их и дальше с этой командой.
Команда Глеба была профессиональной, оперативно реагировали на любые возникающие вопросы и шли навстречу в рабочих моментах. В ходе работы с командой были реализованы части и компоненты масштабного сервиса AI LMS платформы.
Мы разрабатывали несколько сервисов, часть из них запускалась в формате MVP: в частности, автоматизировали обработку запросов корпоративных заказчиков на аренду спортивных площадок. Команда проекта была на связи, и мы активно двигались по нашим требованиям. Достаточно оперативно реализовали и запустили продукт. Спасибо команде!
Обращались в YAVVI за доработками нашего сайта pakpakych.ru. Стек у нас не самый простой: Django, GarpixCMS и React SPA. До этого несколько подрядчиков ограничивались общими рекомендациями «в вакууме». Ребята зашли иначе: сначала провели полноценный технический аудит, разобрали каждый из 26 пунктов нашего ТЗ и по каждому написали, что уже реализовано, чего нет и почему. Отдельно ценно, что не стали продавать нам лишние работы, а честно указали, где функционал в проекте уже есть и где два пункта дублируют друг друга. По ходу аудита нашли критичную проблему, о которой мы не подозревали, и одна эта находка окупила всю работу. По каждой задаче была вилка часов и тип работ, никаких «примерно месяц», всё проверялось руками и подтверждалось инструментами. Каждая доработка выведена в админку, это принципиально: мы получили не разовый результат, а инструмент, плюс обучение нашей команды. Рекомендую тем, у кого нетиповой стек и нужен подрядчик, который сначала разберётся, а потом делает. Продолжаем сотрудничество.
Обсудим вашузадачу
Вам необязательно иметь чёткую задачу. Оставьте контакты, и мы разберём ваши текущие бизнес-процессы и честно покажем, где внедрение технологий даст реальный финансовый результат.
Связаться с нами