你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn

视觉助手

Azure 应用服务
Azure AI 机器人服务
Azure AI 服务

解决方案构想

本文是一种解决方案构想。 如果你希望我们在内容中扩充更多信息,例如潜在用例、备用服务、实现注意事项或定价指南,请通过提供 GitHub 反馈来告知我们。

此解决方案中的视觉助手可提供基于图像内容的丰富信息。

体系结构

Architecture diagram that shows the flow of data between a browser and a bot, and between the bot and search services.

下载此体系结构的 Visio 文件

数据流

  1. 用户通过移动应用或 Web 应用与机器人交互。
  2. 机器人使用语言理解智能服务 (LUIS)(内置于应用程序中)来标识用户意向和聊天上下文。
  3. 机器人将视觉语境(如图像)传递到必应视觉搜索 API。
  4. 机器人从必应实体搜索 API 中检索与图像相关的人员、地点、艺术品、纪念碑和对象的信息。
  5. 机器人从条形码中检索信息。
  6. 或者,机器人可使用必应自定义搜索 API 检索仅限于用户域的条形码或查询的详细信息。
  7. 视觉助手会向用户提供与相关产品、目的地、名人、地点、纪念碑和艺术品有关的信息。

组件

  • Azure 应用服务是一个完全托管的基于 HTTP 的服务,用于托管 Web 应用、REST API 和移动后端。
  • Azure 机器人服务提供一种智能企业级机器人开发环境,可丰富客户体验。 集成环境还提供了一种数据控制维持方法。
  • 必应自定义搜索 API 提供了一种使用必应的强大排名和全局缩放搜索索引创建自定义搜索体验的方法。
  • 必应实体搜索 API 提供的搜索功能可识别相关实体,例如知名人士、地点、电影、电视节目、视频游戏、书籍和企业。
  • 必应视觉搜索 API 返回与给定图像相关的数据,例如类似图像、用于购买图像中商品的购物来源以及包含该图像的网页。
  • 必应 Web 搜索 API 在发出单个 API 调用后给出搜索结果。 结果可编译数十亿个网页、图像、视频和新闻中的相关信息。
  • 适用于语言的 Azure 认知服务Azure 认知服务的一部分,可提供许多自然语言处理服务。
  • 对话语言理解是适用于语言的认知服务的一项功能。 此基于云的 API 服务提供机器学习智能功能,用于构建对话式应用。 可使用 LUIS 来预测对话的含义,并提取相关详细信息。

方案详细信息

此解决方案中的视觉助手可提供基于图像内容的丰富信息。 助手的功能包括阅读名片、解密条形码以及识别知名人士、地点、对象、艺术品和纪念碑。

可能的用例

组织可使用此解决方案提供:

  • 约会安排。
  • 制造、汽车和运输应用中的订单和交货跟踪。
  • 零售条形码购物。
  • 财务和零售中的付款处理。
  • 零售版中的订阅续订。
  • 在教育、媒体和娱乐行业,对知名人士、场所、物品、艺术和纪念碑的鉴定。

后续步骤