Palo Alto Research Center Incorporated (PARC), компания Xerox, которая предоставляет индивидуальные услуги НИОКР, технологии, экспертизу, передовой опыт и интеллектуальную собственность глобальным компаниям, сегодня объявила о заключении контракта на 5,8 миллиона долларов США от Defense Advanced Research Projects. Агентство (DARPA).

В рамках контракта PARC будет работать с Калифорнийским университетом в Санта-Барбаре, Университетом Ростока и Patched Reality — компанией дополненной реальности (AR), которая фокусируется на стратегии продукта, дизайне пользовательского интерфейса и пользовательского интерфейса, а также технической разработке — для разработки искусственного интеллекта. (AI) система, которая поможет пользователям решать сложные физические задачи. Согласно PARC, система преобразует текстовые и видео-руководства в формат, который может обрабатывать компьютер, и будет направлять пользователей при выполнении задач с использованием рекомендаций AR, а также отслеживать выполнение задач.

PARC будет ведущим подрядчиком в проекте, известном как «Автономное мультимодальное поглощение для целевой поддержки» (AMIGOS) для программы управления задачами с учетом восприятия. В рамках проекта будут представлены новые методы извлечения процедурных знаний из контента, восприятия окружающей среды, рассуждений о физических задачах, а также обеспечение диалогового и AR-руководства, персонализированного с учетом уровня знаний отдельного пользователя. PARC заявил, что цель состоит в том, чтобы дать возможность механикам, медикам и другим специалистам выполнять задачи в рамках своих навыков и за их пределами, предоставляя своевременную обратную связь и инструкции по выполнению физических задач.

«Дополненная реальность, компьютерное зрение, обработка языков, обработка диалогов и рассуждение — все это технологии искусственного интеллекта, которые индивидуально разрушили множество отраслей, но никогда не были такими скоординированными и синергетическими», — сказал д-р Чарльз Ортис, главный исследователь AMIGOS. «Используя существующие учебные материалы для создания нового руководства по дополненной реальности, проект AMIGOS призван ускорить это движение, делая рекомендации по выполнению задач и обратную связь по запросу в режиме реального времени».

PARC-AI-and-AR

Пример решений PARC для решения проблем с искусственным интеллектом и дополненной реальностью AR.

В рамках проекта DARPA будет поставлять две основные системы. Первый будет автономным компонентом, который может учиться с помощью нескольких модальностей, таких как язык и видение, для извлечения шагов из немаркированного контента, необходимого для выполнения задачи, включая текстовые инструкции из руководств, иллюстрации и обучающие видео. Второй будет онлайн-компонентом, который использует гибридный подход ИИ, сочетающий как символические, так и нейронные элементы ИИ, для создания интерактивного руководства AR на основе информации, извлеченной автономным компонентом. Руководство, предоставляемое системой, будет персонализировано с учетом способностей отдельного пользователя и с учетом его эмоционального состояния во время выступления.

Xerox и PARC продолжают инвестировать в полевое обслуживание с поддержкой AR. Ранее в этом году Xerox объявила о приобретении CareAR и последующем создании CareAR Holdings (объединение CareAR, DocuShare и XMPie), платформы поддержки дополненной реальности, которая обеспечивает доступ в реальном времени к экспертным знаниям для клиентов, сотрудников и полевых работников. PARC добавил, что опыт, полученный в результате проекта AMIGOS, поможет при разработке будущих продуктов для CareAR.

Для получения дополнительной информации о решениях PARC и Xerox в области дополненной реальности для выездных услуг щелкните здесь.