使用 Vertex AI Agent Builder 和 Dialogflow 生成应用程序

什么是Vertex AI Agent Builder？

Vertex AI Agent Builder 让开发人员（即使是机器学习技能有限的开发人员）能够利用 Google 的基础模型、搜索专业知识和对话式 AI 技术的强大功能来创建企业级生成式 AI 应用程序。

Vertex AI Agent Builder 包含以下功能：

• Vertex AI Agents
• Vertex AI Search

Vertex AI Agents

Vertex AI Agents 是一个基于大型语言模型 (LLM) 构建的新型自然语言理解平台。借助它，您可以轻松设计对话式用户界面并将其集成到您的移动应用、Web 应用、设备、机器人、交互式语音响应系统等中。使用 Vertex AI Agents，您可以为用户提供与您的产品互动的全新且引人入胜的方式。

Chat 应用

类似聊天机器人的应用程序，您可以在其中定义不同的聊天路径。更像 LLM 之前的聊天机器人 - 但增强了 LLM 的功能。与“仅仅”搜索相比，聊天允许更复杂的交互和用户指导。

代理应用 (Agent apps)

代理应用提供了创建虚拟客服的新方式 大型语言模型 (LLM)。 无需定义 Dialogflow CX 流程、页面、意图和转换； 您可以提供自然语言指令和结构化数据。 这可以大幅降低虚拟客服的 创建和维护时间， 为企业实现全新类型的对话体验。

Vertex AI Search

Vertex AI Search 是一个完全托管的平台，由大型语言模型提供支持，可让您为公共或私人网站或移动应用程序构建支持 AI 的搜索和推荐体验。

搜索应用

借助 Vertex AI Search，您可以根据自己的数据快速构建 Google 质量的搜索应用，并在网页或应用中嵌入搜索栏。

您可以创建以下不同类型的搜索应用程序：

• 通用搜索。将通用搜索应用于包含您专有数据的网站或数据存储，让您的客户在您希望他们看到的内容上获得 Google 品质的搜索体验。
• 媒体搜索。这是专门针对电影、视频和音乐等媒体内容设计的搜索功能。通过媒体搜索，观众可以高效地找到他们想要观看或收听的媒体内容。
• 医疗保健搜索。这是一项搜索功能，可让您查询存储在 FHIR 数据存储中的医疗保健记录。您可以从 Cloud Healthcare API FHIR 存储中导入包含临床数据的 FHIR 资源。您还可以搜索 FHIR 资源引用的非结构化数据，例如图像、PDF 文件和 RTF 文件。

推荐应用

您可以根据自己的数据快速构建一个最先进的推荐应用程序，该应用程序可以推荐与用户正在查看的内容类似的内容。

您可以创建以下两种不同类型的推荐应用程序：

• 媒体推荐。获取视频、新闻和音乐等媒体内容的推荐。借助媒体推荐，观众可以发现更多个性化内容，例如接下来要观看或阅读的内容，并使用优化目标定制 Google 品质的结果。
• 通用推荐（预览）。获取非媒体内容的推荐。

数据存储和应用程序

使用 Vertex AI Search，您可以创建搜索或推荐应用并将其附加到数据存储。您可以将数据导入数据存储并编制索引。应用和数据存储具有一对一关系。

根据您使用的数据类型，您可以创建各种类型的数据存储。每个数据存储可以包含一种类型的数据：

• 网站数据：您可以提供诸如 www.ecloudrover.com，并在这些域名上启用内容的搜索。
• 结构化数据：具有结构化数据的数据存储，可对结构化数据（例如 BigQuery 表、 JSONL 文件）。
• 非结构化数据：非结构化数据存储支持对文档和图像等数据进行混合搜索。搜索 HTML、内嵌文本的 PDF 和 TXT 格式的文档。PPTX 和 DOCX 格式在预览版中可用。
• 结构化媒体数据：具有特定于媒体行业的结构化数据架构的数据存储。例如，结构化媒体数据（例如视频、新闻或音乐）
• 第三方数据源：从第三方数据源提取数据，例如Confluence、Jira、Slack等。
• 医疗保健 FHIR 数据