A Claudia agora é capaz de interpretar imagens enviadas durante a conversa!
Essa funcionalidade está disponível nos principais helpdesks que integramos, como Cloud Chat, Zendesk, Hubspot e Intercom.

Como funciona

Quando uma imagem é enviada para a Claudia:

• Ela é automaticamente transcrita por um agente LLM, gerando um resumo semântico da imagem.

• Esse resumo inclui textos extraídos e pode conter também o contexto da situação.

• O resumo é usado para melhorar a busca vetorial por conteúdos relevantes.

• A transcrição acontece apenas uma vez por imagem, no momento em que ela é recebida.

• Na hora de responder, a Claudia também recebe a imagem original, não só o texto transcrito, garantindo uma análise mais completa para orientar melhor o atendimento.

Formatos de imagens suportados:

✅ PNG (.png)
✅ JPEG (.jpeg, .jpg)
✅ WEBP (.webp)

Formatos de arquivos suportados DOCX e PDF: [acesse o link]

Não suportados:

🚫 Vídeos.

Exemplo de uso

Na conversa abaixo, o usuário envia uma foto de uma página web com uma mensagem indicando que ele não está habilitado para realizar sua certificação por videoconferência. Em seguida, a Claudia realiza a transcrição da imagem, analisa o contexto e decide escalar para N2:

Se olharmos o raciocínio da Claudia mais no detalhe, podemos ver que a seção em primeira posição de relevância é justamente uma seção N2 que trata sobre a situação de não estar habilitado para videoconferência:

Com isso, a transcrição da imagem não só melhora a busca por seções relevantes, como também permite que a Claudia entenda o contexto visual e conduza o atendimento de forma ainda mais precisa.

Configuração

A funcionalidade pode ser ativada pela interface do Hub, na aba de Attachments. Basta marcar o checkbox abaixo:

Configuração avançada de prompt:

Mas, se desejar personalizar o prompt usado para transcrever e interpretar imagens por algum motivo específico, entre em contato com o Atendimento

Como testar

Você pode testar o envio de arquivos diretamente pela nossa tela do Playground

Ou você pode realizar um teste end-to-end criando um ticket diretamente no seu helpdesk.

Dessa forma, será possível verificar como a imagem é transcrita, interpretada e utilizada pela IA no atendimento real.

Observações importantes

1. Se por acaso você já adicionou alguma instrução no seu prompt base (muito incomum) ou criou algum conteúdo na IDS (mais comum) para guiar as respostas da ClaudIA em caso de recebimento de imagens, é recomendado que desfaça esses ajustes para evitar conflito de funcionalidades.

2. Caso o seu Helpdesk não esteja enviando corretamente as imagens pra ClaudIA com a extensão .jpg, .png, etc, a imagem não será interpretada. Até agora todos os canais e helpdesks que testamos estão enviando corretamente esse dado.