К списку

OCR-кейс: расшифровка рецептов офтальмолога онлайн

2 дня назад

Клиент – известный бренд очков, который управляет широкой сетью магазинов и предлагает высококачественные стильные оптические товары, включая очки по рецепту и солнцезащитные модели.

Компания столкнулась с неэффективностью процесса заказа очков в магазинах: оптики вручную расшифровывали рецепты, предоставленные клиентами, и вносили в фирменную систему управления заказами. При сложных заказах это занимало 2-3 минуты, отвлекая внимание сотрудников от покупателей. 

Основной целью проекта была разработка индивидуального решения на базе технологии оптического распознавания символов (OCR), которое автоматически и точно расшифровывает рецепты разных форматов, уменьшая количество ошибок и улучшая клиентский опыт. В случае успеха в розничных магазинах решение также планировалось применить в онлайн-каналах для автоматизации расшифровки рецептов онлайн.

В тесном сотрудничестве с клиентом команда ISsoft разработала инновационное решение для расшифровки письменного текста, которая автоматически считывает нужную информацию с изображения. 

Созданная программа обладает высокой адаптивностью, позволяя работать при разных условиях освещения, с широким спектром форматов рецептов и даже при наличии неблагоприятных факторов. 

В программе также есть логика исправлений, которая сразу сообщает сотрудникам о некорректных данных, ошибках расшифровки и других проблемах, которые препятствуют выполнению заказа (например, рецепт с истекшим сроком годности).

Чтобы достичь поставленной цели, вместе с клиентом команда ISsoft заключила Соглашение о деловом партнерстве (Business Associate Agreement, BAA), а также выбрала инструменты и решения для хранения данных, которые соответствуют законам США “О переносимости и подотчетности медицинского страхования” (HIPAA) и требованиям к конфиденциальности медицинских данных (PHI). 

После этого команда предприняла следующие шаги:

  • Создание набора данных: создана база из примерно 10000 аннотированных изображений для обучения модели.
  • Запуск конвейерного обучения: внедрены эффективные конвейеры обучения для повышения точности и производительности моделей по распознаванию и расшифровке письменного текста. 
  • Развертывание модели: внедрены обученные алгоритмы компьютерного зрения, способные обнаруживать и расшифровывать написанную информацию. Это обеспечило беспроблемную интеграцию решения в рабочий процесс заказчика.
  • Интеграция логики исправлений: добавлена логика коррекции для повышения точности работы системы, даже при наличии ошибок в написании или неразборчивого почерка.
  • Создание бессерверного решения: создано бессерверное решение, которое оптимизирует расходы, упрощает внедрение и обслуживание программы расшифровки рецептов.
  • Разработка приложения для iPad: разработано интуитивно понятное приложение для iPad, которое используется в точках продаж. Удобный интерфейс позволяет легко использовать программу для расшифровки рецептов в процессе подбора и выдачи очков.

Программа для распознавания письменного текста – это результат успешного сотрудничества. Сейчас она используется в более чем 200 точках продаж клиента. Она не только улучшает клиентский опыт, но и значительно оптимизирует рабочий процесс, снижая время и усилия, которые обычно затрачивались на расшифровку заключения офтальмолога и подбор подходящих очков.

Результат: заказчик активно внедряет продукт в онлайн-каналы продаж и рассматривает возможность его использования для других категорий продуктов, выписываемых по рецепту.