Introdução ao exemplo de chat corporativo Python usando o RAG

Este artigo mostra como implantar e executar o exemplo de aplicativo de chat corporativo para Python. Este exemplo implementa um aplicativo de bate-papo usando Python, Serviço OpenAI do Azure e Geração Aumentada de Recuperação (RAG) na Pesquisa de IA do Azure para obter respostas sobre os benefícios dos funcionários em uma empresa fictícia. O aplicativo é semeado com arquivos PDF, incluindo o manual do funcionário, um documento de benefícios e uma lista de funções e expectativas da empresa.

• Vídeo de demonstração

Comece agora

Seguindo as instruções neste artigo, você irá:

• Implante um aplicativo de chat no Azure.
• Obtenha respostas sobre os benefícios dos funcionários.
• Altere as configurações para alterar o comportamento das respostas.

Depois de concluir este procedimento, você pode começar a modificar o novo projeto com seu código personalizado.

Este artigo faz parte de uma coleção de artigos que mostram como criar um aplicativo de chat usando o Serviço OpenAI do Azure e a Pesquisa do Azure AI.

Outros artigos da coleção incluem:

• .NET
• Java
• JavaScript
• Frontend JavaScript + backend Python

Descrição geral da arquitetura

Uma arquitetura simples do aplicativo de bate-papo é mostrada no diagrama a seguir:

Os principais componentes da arquitetura incluem:

• Uma aplicação Web para alojar a experiência de chat interativa.
• Um recurso do Azure AI Search para obter respostas dos seus próprios dados.
• Um Serviço OpenAI do Azure para fornecer:
  • Palavras-chave para melhorar a pesquisa sobre os seus próprios dados.
  • Respostas do modelo OpenAI.
  • Incorporações do modelo ada

Custo

A maioria dos recursos nessa arquitetura usa um nível de preço básico ou de consumo. O preço de consumo é baseado no uso, o que significa que você paga apenas pelo que usa. Para completar este artigo, haverá uma cobrança, mas será mínima. Quando terminar o artigo, você pode excluir os recursos para parar de incorrer em cobranças.

Saiba mais sobre o custo no repositório de amostra.

Pré-requisitos

Um ambiente de contêiner de desenvolvimento está disponível com todas as dependências necessárias para concluir este artigo. Você pode executar o contêiner de desenvolvimento no GitHub Codespaces (em um navegador) ou localmente usando o Visual Studio Code.

Para usar este artigo, você precisa dos seguintes pré-requisitos:

Codespaces (recomendado)

1. Uma assinatura do Azure - Crie uma gratuitamente
2. Permissões da conta do Azure - Sua Conta do Azure deve ter permissões Microsoft.Authorization/roleAssignments/write, como Administrador de Acesso de Usuário ou Proprietário.
3. Acesso concedido ao Azure OpenAI na subscrição pretendida do Azure. Atualmente, o acesso a este serviço é concedido apenas por pedido. Você pode solicitar acesso ao Azure OpenAI preenchendo o formulário em https://aka.ms/oai/access. Abra um problema neste repositório para entrar em contato conosco se tiver um problema.
4. Conta do GitHub

Visual Studio Code

1. Uma assinatura do Azure - Crie uma gratuitamente
2. Permissões da conta do Azure - Sua Conta do Azure deve ter permissões Microsoft.Authorization/roleAssignments/write, como Administrador de Acesso de Usuário ou Proprietário.
3. Acesso concedido ao Azure OpenAI na subscrição pretendida do Azure. Atualmente, o acesso a este serviço é concedido apenas por pedido. Você pode solicitar acesso ao Azure OpenAI preenchendo o formulário em https://aka.ms/oai/access. Abra um problema neste repositório para entrar em contato conosco se tiver um problema.
4. CLI do desenvolvedor do Azure
5. Docker Desktop - inicie o Docker Desktop se ainda não estiver em execução
6. Visual Studio Code
7. Extensão de contêiner de desenvolvimento

Ambiente de desenvolvimento aberto

Comece agora com um ambiente de desenvolvimento que tenha todas as dependências instaladas para concluir este artigo.

Codespaces do GitHub (recomendado)

O GitHub Codespaces executa um contêiner de desenvolvimento gerenciado pelo GitHub com o Visual Studio Code for the Web como interface do usuário. Para o ambiente de desenvolvimento mais simples, use o GitHub Codespaces para que você tenha as ferramentas de desenvolvedor corretas e as dependências pré-instaladas para concluir este artigo.

Importante

Todas as contas do GitHub podem usar o Codespaces por até 60 horas gratuitas por mês com 2 instâncias principais. Para obter mais informações, consulte GitHub Codespaces mensalmente incluído armazenamento e horas principais.

1. Inicie o processo para criar um novo espaço de código GitHub na main ramificação do Azure-Samples/azure-search-openai-demo repositório GitHub.

2. Clique com o botão direito do mouse no botão a seguir e selecione Abrir link em novas janelas para ter o ambiente de desenvolvimento e a documentação disponíveis ao mesmo tempo.

   Abra este projeto no GitHub Codespaces

3. Na página Criar espaço de código, revise as definições de configuração do espaço de código e selecione Criar novo espaço de código

   

4. Aguarde até que o espaço de código inicie. Este processo de arranque pode demorar alguns minutos.

5. No terminal na parte inferior da tela, entre no Azure com a CLI do Azure Developer.

   azd auth login
   

6. Copie o código do terminal e cole-o em um navegador. Siga as instruções para autenticar com sua conta do Azure.

7. As tarefas restantes neste artigo ocorrem no contexto desse contêiner de desenvolvimento.

Visual Studio Code

A extensão Dev Containers para Visual Studio Code requer que o Docker seja instalado em sua máquina local. A extensão hospeda o contêiner de desenvolvimento localmente usando o host Docker com as ferramentas de desenvolvedor corretas e dependências pré-instaladas para concluir este artigo.

1. Abra o Visual Studio Code no contexto de um diretório vazio.

2. Verifique se você tem a extensão Dev Containers instalada no Visual Studio Code.

3. Abra um novo terminal no editor.

   Gorjeta

   Você pode usar o menu principal para navegar até a opção de menu Terminal e, em seguida, selecionar a opção Novo Terminal .

   

4. Entre no Azure com a CLI do Desenvolvedor do Azure.

   azd auth login
   

   Quando solicitado, copie o código do terminal e cole-o em um navegador. Siga as instruções para autenticar com sua conta do Azure.

5. Crie uma pasta e inicialize-a para usar o projeto de exemplo com a CLI do Azure Developer:

   azd init -t azure-search-openai-demo
   

   Não é necessário clonar este repositório.

6. Abra a Paleta de comandos, procure os comandos Dev Containers e selecione Dev Containers: Reopen in Container.

   Gorjeta

   Visual Studio Code pode solicitar automaticamente que você reabra a pasta existente dentro de um contêiner de desenvolvimento. Isso é funcionalmente equivalente a usar a paleta de comandos para reabrir o espaço de trabalho atual em um contêiner.

7. Reabra a janela do Terminal novamente (Ctrl + `) e deixe-a aberta.

8. Os restantes exercícios deste projeto decorrem no contexto deste contentor de desenvolvimento.

Implantar e executar

O repositório de exemplo contém todos os arquivos de código e configuração necessários para implantar um aplicativo de chat no Azure. As etapas a seguir orientam você pelo processo de implantação do exemplo no Azure.

Implantar o aplicativo de chat no Azure

Importante

Os recursos do Azure criados nesta seção incorrem em custos imediatos, principalmente do recurso Azure AI Search. Esses recursos podem acumular custos mesmo se você interromper o comando antes que ele seja totalmente executado.

1. Execute o seguinte comando da CLI do Desenvolvedor do Azure para provisionar os recursos do Azure e implantar o código-fonte:

   azd up
   

2. Quando lhe for pedido para introduzir um nome de ambiente, mantenha-o curto e minúsculo. Por exemplo, myenv. Ele é usado como parte do nome do grupo de recursos.

3. Quando solicitado, selecione uma assinatura para criar os recursos.

4. Quando lhe for pedido para selecionar uma localização pela primeira vez, selecione uma localização perto de si. Este local é usado para a maioria dos recursos, incluindo hospedagem.

5. Se for solicitado um local para o modelo OpenAI ou para o recurso Document Intelligence, selecione o local mais próximo de você. Se o mesmo local estiver disponível como seu primeiro local, selecione isso.

6. Aguarde até que o aplicativo seja implantado. Pode levar de 5 a 10 minutos para que a implantação seja concluída.

7. Depois que o aplicativo for implantado com êxito, você verá uma URL exibida no terminal.

8. Selecione esse URL rotulado (✓) Done: Deploying service webapp para abrir o aplicativo de bate-papo em um navegador.

   

Use o aplicativo de bate-papo para obter respostas de arquivos PDF

O aplicativo de bate-papo é pré-carregado com informações de benefícios de funcionários de arquivos PDF. Você pode usar o aplicativo de bate-papo para fazer perguntas sobre os benefícios. As etapas a seguir orientam você pelo processo de uso do aplicativo de bate-papo.

1. No navegador, selecione ou digite O que acontece em uma avaliação de desempenho? na caixa de texto do bate-papo.

   

2. Na resposta, selecione uma citação.

   

3. No painel direito, use as guias para entender como a resposta foi gerada.

   Separador	Description
   Processo de pensamento	Este é um script das interações no chat. Você pode visualizar o prompt do sistema (content) e sua pergunta de usuário (content).
   Conteúdo de suporte	Isso inclui as informações para responder à sua pergunta e o material de origem. O número de citações de material de origem é anotado nas configurações do desenvolvedor. O valor padrão é 3.
   Citação	Isso exibe a página original que contém a citação.

4. Quando terminar, selecione a guia selecionada novamente para fechar o painel.

Usar as configurações do aplicativo de bate-papo para alterar o comportamento das respostas

A inteligência do chat é determinada pelo modelo OpenAI e pelas configurações que são usadas para interagir com o modelo.

Definição	Descrição
Substituir modelo de prompt	Este é o prompt que é usado para gerar a resposta.
Temperatura	A temperatura usada para a chamada final da API de conclusão do chat, um número entre 0 e 1 que controla a "criatividade" do modelo.
Pontuação mínima de pesquisa	A pontuação mínima dos resultados da pesquisa que são usados para gerar a resposta. O intervalo depende do modo de pesquisa utilizado.
Pontuação mínima do reclassificador	A pontuação mínima do classificador semântico dos resultados da pesquisa que são usados para gerar a resposta. Varia de 0 a 4.
Recuperar esses muitos resultados de pesquisa	Este é o número de resultados de pesquisa que são usados para gerar a resposta. Você pode ver essas fontes retornadas nas guias Processo de pensamento e Conteúdo de suporte da citação.
Excluir categoria	Esta é a categoria de documentos excluídos dos resultados da pesquisa.
Usar classificador semântico para recuperação	Este é um recurso do Azure AI Search que usa aprendizado de máquina para melhorar a relevância dos resultados da pesquisa.
Use resumos contextuais de consulta em vez de documentos inteiros	Quando ambos Use semantic ranker são Use query-contextual summaries verificados, o LLM usa legendas extraídas de passagens chave, em vez de todas as passagens, nos documentos mais bem classificados.
Sugira perguntas de acompanhamento	Peça ao aplicativo de bate-papo que sugira perguntas de acompanhamento com base na resposta.
Modo de recuperação	Vetores + Texto significa que os resultados da pesquisa são baseados no texto dos documentos e nas incorporações dos documentos. Vetores significa que os resultados da pesquisa são baseados nas incorporações dos documentos. Texto significa que os resultados da pesquisa se baseiam no texto dos documentos.
Transmitir respostas de conclusão do chat	Transmitir resposta em vez de esperar até que a resposta completa esteja disponível para uma resposta.

As etapas a seguir orientam você pelo processo de alteração das configurações.

1. No navegador, selecione a guia Configurações do desenvolvedor .

2. Marque a caixa de seleção Sugerir perguntas de acompanhamento e faça a mesma pergunta novamente.

   What happens in a performance review?
   

   O bate-papo retornou sugestões de perguntas de acompanhamento, como as seguintes:

   1. What is the frequency of performance reviews?
   2. How can employees prepare for a performance review?
   3. Can employees dispute the feedback received during the performance review?
   

3. Na guia Configurações, desmarque Usar classificador semântico para recuperação.

4. Fazer a mesma pergunta novamente?

   What happens in a performance review?
   

5. Qual é a diferença nas respostas?

   Com o classificador semântico: durante uma avaliação de desempenho na Contoso Electronics, os funcionários terão a oportunidade de discutir seus sucessos e desafios no local de trabalho (1). A revisão fornecerá feedback positivo e construtivo para ajudar os funcionários a se desenvolverem e crescerem em suas funções (1). O funcionário receberá um resumo escrito da avaliação de desempenho, que incluirá uma avaliação de seu desempenho, feedback e metas e objetivos para o próximo ano (1). A avaliação de desempenho é um diálogo bidirecional entre gestores e empregados (1).

   Sem a classificação semântica: durante uma avaliação de desempenho na Contoso Electronics, os funcionários têm a oportunidade de discutir seus sucessos e desafios no local de trabalho. Feedback positivo e construtivo é fornecido para ajudar os funcionários a se desenvolverem e crescerem em suas funções. É apresentado um resumo escrito da avaliação de desempenho, incluindo uma avaliação do desempenho, feedback e objetivos para o ano seguinte. A revisão é um diálogo bidirecional entre gestores e empregados (1).

Clean up resources (Limpar recursos)

Limpar recursos do Azure

Os recursos do Azure criados neste artigo são cobrados na sua assinatura do Azure. Se você não espera precisar desses recursos no futuro, exclua-os para evitar incorrer em mais cobranças.

Execute o seguinte comando da CLI do Desenvolvedor do Azure para excluir os recursos do Azure e remover o código-fonte:

azd down --purge --force

Os interruptores fornecem:

• purge: Os recursos excluídos são imediatamente limpos. Isso permite que você reutilize o Azure OpenAI TPM.
• force: A eliminação acontece de forma silienta, sem necessidade de consentimento do utilizador.

Limpar espaços de código do GitHub

Espaços de código do GitHub

Excluir o ambiente do GitHub Codespaces garante que você possa maximizar a quantidade de direitos de horas gratuitas por núcleo que você obtém para sua conta.

Importante

Para obter mais informações sobre os direitos da sua conta do GitHub, consulte Codespaces do GitHub mensalmente incluídos armazenamento e horas principais.

1. Entre no painel do GitHub Codespaces (https://github.com/codespaces).

2. Localize seus Codespaces atualmente em execução provenientes do Azure-Samples/azure-search-openai-demo repositório GitHub.

   

3. Abra o menu de contexto do espaço de código e selecione Excluir.

   

Visual Studio Code

Você não é necessariamente obrigado a limpar seu ambiente local, mas pode parar o contêiner de desenvolvimento em execução e retornar à execução do Visual Studio Code no contexto de um espaço de trabalho local.

1. Abra a Paleta de comandos, procure os comandos Dev Containers e selecione Dev Containers: Reopen Folder Locally.

   

Gorjeta

O Visual Studio Code interromperá o contêiner de desenvolvimento em execução, mas o contêiner ainda existe no Docker em um estado interrompido. Você sempre tem a opção de excluir a instância do contêiner, a imagem do contêiner e os volumes do Docker para liberar mais espaço na máquina local.

Obter ajuda

Este repositório de exemplo oferece informações de solução de problemas.

Se o problema não for resolvido, registre-o nos Problemas do repositório.

Próximos passos

• Aplicativo de bate-papo corporativo repositório GitHub
• Crie um aplicativo de bate-papo com a arquitetura de solução de práticas recomendadas do Azure OpenAI
• Controle de acesso em aplicativos de IA generativa com a Pesquisa de IA do Azure
• Crie uma solução OpenAI pronta para empresas com o Azure API Management
• Superando a pesquisa vetorial com recursos híbridos de recuperação e classificação