Визуальный консультант

Служба приложений
Служба Bot
Распознавание речи

Концепция решения

Если вы хотите ознакомиться с этой статьей, дополнительные сведения, сведения о реализации, рекомендации по ценам или примеры кода, сообщите нам о них.

Помощник по Visual Assistant предоставляет обширную информацию на основе содержимого изображения с такими возможностями, как чтение визитной карточки, определение штрихкода и распознавание популярных людей, мест, объектов, артворкс и скульптур.

Архитектура

Схема архитектуры . Скачайте SVG этой архитектуры.

Поток данных

  1. Пользователи взаимодействуют с Bot через мобильное приложение или веб-приложение.
  2. Bot понимает намерение пользователя и контекст взаимодействия с помощью LUIS, встроенного в приложение.
  3. Bot передает визуальный контекст (то есть изображение) в API визуального поиска Bing.
  4. Bot получает дополнительные сведения из Поиск сущностей Bing для расширенного контекста для людей, размещений, иллюстраций, памятниках и объектов.
  5. Bot получает дополнительные сведения о штрихкодах.
  6. При необходимости программа-робот получает дополнительные сведения о штрихкодах и запросах только из вашего домена с помощью API пользовательского поиска Bing.
  7. Помощник по Visual Assistant отображает аналогичные продукты и назначения из домена или предоставляет дополнительные сведения о знаменитости/Place/скульптур/артворкс.

Компоненты

  • Служба приложений Azure. полностью управляемая служба на основе HTTP для размещения веб-приложений, интерфейсов API и мобильных серверных компонентов
  • Служба Azure Bot: Разработка интеллектуальных программы-роботыов корпоративного уровня, которые расширяют возможности клиентов, сохраняя контроль над данными.
  • Пользовательский поиск Bing: Создание настраиваемого поиска, удовлетворяющего потребностям бизнеса, с помощью эффективного ранжирования и глобального индекса поиска в Bing.
  • Поиск сущностей Bing: депредохранительный Поиск глубокого знания в существующем содержимом путем определения наиболее подходящего
  • Визуальный поиск Bing: Поиск визуальных сведений из изображений
  • Поиск в Интернете Bing: интеллектуальный поиск в своих приложениях и использование возможности объединения веб-страниц, изображений, видео и новостей с помощью одного вызова API
  • Служба распознавание речи Intelligence (Luis): создание естественного языка для приложений, программы-роботы и устройств IOT

Дальнейшие действия