Немецкий алгоритм научился создавать инструкции в дополненной реальности на основе обычных видео

Компания IOXP из Мангейма разработала программу для создания учебных пособий в AR. Для создания инструкции пользователю необходимо снять на обычную камеру решение определённой задачи: от вышивания крестиком до сборки сложного механизма.

Затем алгоритм разобьёт видео на доступные для восприятия части. С помощью компьютерного зрения программа распознаёт отдельные объекты и анализирует действия человека. После система создаст пошаговую интерактивную инструкцию в дополненной реальности. Учебное руководство в AR воспроизводится как только система определит задачу. По словам разработчиков, программа указывает на необходимые детали с точностью до полусантиметра.

«Цель состоит в том, чтобы любой, кто хочет что-то починить, мог загрузить пособие на своё AR-устройство, которое покажет ему, как выполнить эту задачу», — отметил сооснователь IOXP Дидье Штрикер (Didier Stricker).

Систему можно использовать и без AR-шлемов — достаточно обычных смартфонов

Один из главных претендентов на массовое производство AR-инструкций — IKEA. Все инструкции по сборке мебели IKEA уже сегодня доступны на YouTube, потому перевод этих видео в AR-приложение — вопрос времени.

12 сентября IKEA представила собственное приложение для дополненной реальности, которое позволит оценить, как мебель впишется в реальный интерьер. Сервис работает на платформе ARKit и станет доступен в сентябре вместе с выходом iOS 11. Приложение будет поддерживать более двух тысяч предметов мебели.

Хотите подсказать новость или поделиться экспертным мнением? Пишите: news@cossa.ru

Автор иконки на тизере: Lance Weisser, Noun Project

Мобильная разработка в 2021 и до бесконечности

Самый эргономичный спецпроект Cossa и Surf — о том, как создавать и развивать удобные, полезные приложения. Кейсы, обзоры, советы экспертов: всё ценное в одном месте.

Разработка, маркетинг и продажи в мобайле →

Реклама