Сбор и разметка данных
Готовим данные, на которых обучаются модели: собираем, чистим, размечаем и проверяем. От этой части зависит, будет ли точность в эксплуатации такой же, как на демонстрации.
Какую задачу закрывает
Модель, обученная на открытых наборах, на вашем объекте работает хуже: ракурсы камер, освещение, спецодежда, упаковка и оборудование отличаются от обучающей выборки. Разметка нескольких тысяч кадров с вашей площадки даёт больший прирост точности, чем усложнение архитектуры модели.
Что делаем
- Разметка изображений и видео: боксы, полигоны, ключевые точки, треки
- Разметка текста: классы, сущности, оценки
- Многоэтапная валидация с контролем согласованности между разметчиками
- Формирование обучающих и отложенных выборок
- Работа в закрытом контуре и под соглашением о неразглашении
Как работает
Начинаем с инструкции по разметке: что считается объектом, где граница класса, как размечать спорные случаи. Инструкцию согласуем с вами на пробной партии.
Затем размечаем партиями. Часть кадров размечается двумя людьми независимо, расхождения разбираются отдельно и уточняют инструкцию. Выборку для проверки модели откладываем заранее и в обучение не берём.
Безопасность данных
Работаем под NDA, при необходимости разметка идёт на вашей инфраструктуре, и данные не покидают контур. Доступ к данным ограничен людьми на проекте.
Что вы получаете
Размеченный датасет в нужном формате, инструкцию по разметке, отчёт о согласованности между разметчиками, разбиение на обучающую и отложенную выборки.
Метрики и приёмка
Принимаем партии по выборочной проверке: доля кадров без ошибок разметки и согласованность между разметчиками на дублированной части. Пороги фиксируем после пробной партии.
Сроки
Пробная партия и согласование инструкции - около недели. Дальше срок зависит от объёма и сложности разметки: боксы размечаются в разы быстрее, чем полигоны или ключевые точки.
Частые вопросы
Можно ли разметить только данные, без обучения модели?
Да, разметку берём и отдельной услугой, в том числе для команд, которые обучают модели сами.
Опыт наших клиентов
Мой проект - тематический сайт знакомств. Я оцениваю его как проект высокого уровня сложности: очень непросто найти разработчиков, которые могли бы его реализовать. Я работал с командой Глеба в течение более двух лет с перерывами, которые были связаны исключительно с моим финансовым состоянием. По итогу могу сказать, что вполне доволен проделанной работой. Ребята знают своё дело, с хорошей коммуникабельностью, и всегда помогут советом. В данный момент вся основная работа сделана, сайт находится в рабочем состоянии и набирает пользователей. Есть идеи по добавлению новых функций, и если я решусь на это, то буду реализовывать их и дальше с этой командой.
Команда Глеба была профессиональной, оперативно реагировали на любые возникающие вопросы и шли навстречу в рабочих моментах. В ходе работы с командой были реализованы части и компоненты масштабного сервиса AI LMS платформы.
Мы разрабатывали несколько сервисов, часть из них запускалась в формате MVP: в частности, автоматизировали обработку запросов корпоративных заказчиков на аренду спортивных площадок. Команда проекта была на связи, и мы активно двигались по нашим требованиям. Достаточно оперативно реализовали и запустили продукт. Спасибо команде!
Обращались в YAVVI за доработками нашего сайта pakpakych.ru. Стек у нас не самый простой: Django, GarpixCMS и React SPA. До этого несколько подрядчиков ограничивались общими рекомендациями «в вакууме». Ребята зашли иначе: сначала провели полноценный технический аудит, разобрали каждый из 26 пунктов нашего ТЗ и по каждому написали, что уже реализовано, чего нет и почему. Отдельно ценно, что не стали продавать нам лишние работы, а честно указали, где функционал в проекте уже есть и где два пункта дублируют друг друга. По ходу аудита нашли критичную проблему, о которой мы не подозревали, и одна эта находка окупила всю работу. По каждой задаче была вилка часов и тип работ, никаких «примерно месяц», всё проверялось руками и подтверждалось инструментами. Каждая доработка выведена в админку, это принципиально: мы получили не разовый результат, а инструмент, плюс обучение нашей команды. Рекомендую тем, у кого нетиповой стек и нужен подрядчик, который сначала разберётся, а потом делает. Продолжаем сотрудничество.
Обсудим вашузадачу
Вам необязательно иметь чёткую задачу. Оставьте контакты, и мы разберём ваши текущие бизнес-процессы и честно покажем, где внедрение технологий даст реальный финансовый результат.
Связаться с нами