Заказчик
Клиент – известный бренд очков, управляющий сетью магазинов и предлагающий высококачественные стильные оптические товары, в том числе очки по рецепту и солнцезащитные модели.
Бизнес-задача
Заказчик уже имел передовой онлайн-сервис подбора очков (Virtual Try-On, VTO), но хотел его улучшить. Цель заключалась в том, чтобы позволить покупателям (многим из которых нужны были очки для четкого зрения) использовать VTO, не снимая очки во время примерки онлайн. Задачей стала разработка мобильного приложения, первоначально для iOS, которое могло бы в реальном времени удалять очки с лица покупателя и заменять их на другие с помощью технологии дополненной реальности (AR).
Идея, ранее казавшаяся невыполнимой из-за технических ограничений, стала реализуемой благодаря сотрудничеству с командой ISsoft.
Решение
В тесном сотрудничестве с клиентом команда ISsoft разработала революционное мобильное приложение на базе искусственного интеллекта, которое в реальном времени удаляет очки с лица пользователя и заменяет их AR-моделями. Ключевыми достижениями стали способности приложения работать в реальном времени, адаптироваться под разные условия освещения, эффективно распознавать и «стирать» очки различных форм, цветов и размеров.
Для реализации проекта команда выполнила следующие шаги:
- Исследование нейронных сетей: изучены и выбраны оптимальные архитектуры.
- Создание набора данных: созданы массив данных примерно из 10000 аннотированных изображений для семантической сегментации и обнаружения предметов. Дополнительно были использованы существующие ресурсы VTO для улучшения обучающих и тестовых моделей.
- Разработка обучающих конвейеров: созданы пайплайны для обучения моделей.
- Развертывание моделей: развернуты несколько моделей, включая обнаружение очков, семантическую сегментацию оправы очков и алгоритмы их «стирания».
- Разработка мобильного приложения: разработано мобильное приложение для интеграции и демонстрации этих моделей. Оно обеспечивает работу в режиме реального времени (30 кадров в секунду).
- Тестирование и доработка: проведено множество пользовательских тестов, позволивших минимизировать визуальные артефакты и повысить эффективность обработки.
В данный момент приложение находится на финальной стадии подготовки к запуску на iOS.
Результаты
Сотрудничество клиента с ISsoft началось с амбициозной цели: усовершенствовать технологию дополненной реальности для онлайн-подбора формы очков с помощью расширенных функций, которые изначально казались нереализуемыми. Благодаря опыту и профессионализму команды ISsoft эта идея воплотилась в реальность.
Результатом стало одно из самых технологически продвинутых приложений в отрасли, которое уже повысило узнаваемость бренда и увеличило продажи, привлекая новую аудиторию.
