Ideias de soluções
Esse artigo é uma ideia de solução. Caso deseje que ampliemos o conteúdo com mais informações, como possíveis casos de uso, serviços alternativos, considerações sobre implementação ou diretrizes de preços, fale conosco enviando seus comentários no GitHub.
Essa solução apresenta um assistente visual que fornece informações avançadas baseadas no conteúdo de uma imagem.
Arquitetura
Baixe um Arquivo Visio dessa arquitetura.
Fluxo de dados
- Os usuários interagem com um bot por meio de um aplicativo móvel ou um aplicativo Web.
- O bot usa o LUIS (Serviço de Inteligência de Reconhecimento Vocal), que é integrado ao aplicativo, para identificar a intenção do usuário e o contexto de conversa.
- O bot passa o contexto visual, como uma imagem, para a API de Pesquisa Visual do Bing.
- O bot recupera informações da API de Pesquisa de Entidade do Bing sobre pessoas, locais, obras de arte, monumentos e objetos relacionados à imagem.
- O bot recupera informações de códigos de barras.
- Opcionalmente, o bot obtém mais informações sobre códigos de barras ou consultas limitadas ao domínio do usuário usando a API de Pesquisa Personalizada do Bing.
- O assistente visual apresenta ao usuário as informações sobre produtos, destinos, celebridades, locais, monumentos e obras de arte relacionadas.
Componentes
- O Serviço de Aplicativo do Azure é um serviço totalmente gerenciado baseado em HTTP para hospedar aplicativos Web, APIs REST e back-ends móveis.
- O Serviço de Bot do Azure oferece um ambiente para desenvolver bots inteligentes de nível empresarial que enriquecem as experiências do cliente. O ambiente integrado também fornece uma maneira de manter o controle de seus dados.
- A API de Pesquisa Personalizada do Bing fornece uma maneira de criar experiências de pesquisa personalizadas com a classificação avançada do Bing e o índice de pesquisa em escala global.
- A API de Pesquisa de Entidade do Bing oferece recursos de pesquisa que identificam entidades relevantes, como pessoas conhecidas, locais, filmes, programas de TV, videogames, livros e empresas.
- A API de Pesquisa Visual do Bing retorna dados relacionados a uma determinada imagem, como imagens semelhantes, fontes de compras para comprar o item na imagem e páginas da Web que incluem a imagem.
- A API de Pesquisa na Web do Bing fornece resultados de pesquisa depois que você emite uma única chamada à API. Os resultados compilam informações relevantes de bilhões de páginas da Web, imagens, vídeos e notícias.
- OServiço Cognitivo do Azure para Linguagem faz parte dos Serviços Cognitivos do Azure que oferecem muitos serviços de processamento de linguagem natural.
- A Compreensão da linguagem coloquial é um recurso do Serviço Cognitivo para Linguagem. Esse serviço de API baseado em nuvem oferece recursos de inteligência de aprendizado de máquina para a criação de aplicativos de conversação. Você pode usar o LUIS para prever o significado de uma conversa e extrair informações relevantes e detalhadas.
Detalhes do cenário
Essa solução apresenta um assistente visual que fornece informações avançadas baseadas no conteúdo de uma imagem. As funcionalidades do assistente incluem ler cartões de visita, decifrar códigos de barras e reconhecer pessoas conhecidas, locais, objetos, obras de arte e monumentos.
Possíveis casos de uso
As organizações podem usar essa solução para fornecer:
- Agendamento de compromisso.
- Acompanhamento de pedidos e entregas em aplicativos de fabricação, automóveis e transporte.
- Compras de código de barras no varejo.
- Processamento de pagamento em finanças e varejo.
- Renovações de assinatura no varejo.
- A identificação de pessoas conhecidas, lugares, objetos, arte e monumentos, nas indústrias de educação, mídia e entretenimento.
Próximas etapas
Para criar um aplicativo que detecte o contexto que importa para você, consulte Início Rápido: Criar um projeto de detecção de objetos com a biblioteca de clientes da Visão Personalizada.
Para explorar os recursos de pesquisa que o Bing fornece, consulte a família Bing de APIs de pesquisa.
Para criar o LUIS em seu bot, consulte Adicionar compreensão da linguagem natural ao seu bot.
Para explorar um módulo do Learn sobre como o LUIS funciona, consulte Criar um modelo de linguagem com o Conversational Language Understanding.
Para saber como criar com o Serviço de Bot, consulte Criar um bot com o Serviço de Idioma e o Serviço de Bot do Azure.
Para criar um bot que incorpora o QnA Maker e o Serviço de Bot, consulte Criar soluções de IA de conversação.
Para solidificar sua compreensão do LUIS, do Serviço de Bot e da API de Pesquisa Visual do Bing, consulte a IA do Exame-900: Conceitos básicos da IA do Microsoft Azure.
Para certificar seu conhecimento sobre os Serviços Cognitivos, consulte Microsoft Certified: Azure AI Engineer Associate.
Para saber mais sobre os componentes nesta solução, confira estes recursos: