Comprovação de citações em IA
O que Comprovação de citações em IA significa
Comprovação de citações em IA é a verificação de que uma resposta atribuiu uma afirmação a uma fonte identificável e de que essa fonte sustenta o trecho atribuído. Exige preservar pergunta, resposta, destino do link, data e superfície consultada. Uma menção à marca, uma URL digitada no texto e uma citação com atribuição são observações diferentes; nenhuma, sozinha, comprova preferência geral do sistema.
Como o conceito funciona na prática
O roteiro abaixo é uma proposta operacional da Quaerion. Os formatos de metadados citados são exemplos documentados de provedores, não um formato universal compartilhado por todas as interfaces.
- 01
Registre o contexto da observação: pergunta exata, idioma, data, produto ou endpoint, modelo informado, uso de busca e condição de acesso. Preserve a resposta completa antes de resumir; identifique separadamente uma captura de interface e uma execução de API.
- 02
Separe as classes de evidência. Na API de web search da OpenAI, annotations identifica atribuições, enquanto sources pode listar mais URLs consultadas. Uma página recuperada pode não constar nas citações finais; o conjunto de fontes não é o numerador da taxa de citação. [1]
- 03
Relacione a atribuição à afirmação. Na API Gemini com grounding, groundingSupports associa segmentos da resposta a groundingChunks. Esse mapeamento ajuda a localizar a relação proposta pelo sistema, mas a inspeção do conteúdo continua necessária para avaliar se a referência sustenta a frase. [2]
- 04
Abra o destino e confira identidade, trecho, contexto e atualização. Preserve a URL citada e a URL final após redirecionamentos. Uma homepage genérica pode conter a marca e ainda não sustentar preço, característica técnica ou comparação apresentados na resposta.
- 05
Classifique o resultado com critérios declarados: atribuição sustentada, suporte parcial, suporte ausente ou destino não verificável. Conserve o trecho necessário para revisão e a justificativa da classificação. Fonte inacessível exige esse estado explícito; não autoriza presumir suporte ou inventar uma falha factual.
Como verificar sem extrapolar a evidência
Neste roteiro, a cobertura de atribuição compara afirmações verificáveis com referência associada ao total de afirmações verificáveis examinadas. A precisão de suporte compara atribuições sustentadas às atribuições que puderam ser verificadas. Publique ambos os denominadores e informe as não verificáveis à parte. Uma resposta com muitos links pode ter boa cobertura e baixo suporte. A avaliação deve manter pergunta, protocolo e unidade de contagem comparáveis entre ciclos, sem converter o resultado em probabilidade universal de citação.
Como isso aparece em uma situação prática?
Exemplo didático: um assistente afirma que a ferramenta fictícia Atlas possui exportação CSV e cita uma página que descreve somente PDF. O domínio pertence à ferramenta e o link funciona, mas não sustenta a afirmação sobre CSV. A auditoria registra uma atribuição sem suporte para esse trecho; não conclui que todas as respostas sobre Atlas estejam erradas.
Exemplo explicativo; não é caso de cliente nem resultado certificado.Funções diferentes exigem evidências diferentes
| Conceito | Como distinguir |
|---|---|
| Menção de marca | Registra o nome no texto, sem exigir uma fonte atribuída à afirmação. |
| Grounding | Relaciona geração a contexto externo. A auditoria examina o suporte e a atribuição que podem ser observados. |
| Citabilidade estrutural | Avalia uma heurística de extração do conteúdo publicado; não observa uma citação efetivamente produzida. |
Perguntas frequentes sobre Comprovação de citações em IA
Um link para minha marca comprova uma citação correta?
Comprova que o destino apareceu naquele contexto. Para classificar a citação como sustentada, confira qual afirmação recebeu a atribuição e se a página realmente a sustenta. Links de navegação, referências genéricas e atribuições factuais têm funções diferentes.
Posso comparar uma resposta da API com a interface pessoal?
Pode apresentar as duas observações separadamente, com suas condições. Não trate uma chamada de modelo por API como réplica da interface: ferramentas, contexto, personalização e apresentação de fontes podem diferir.
Limitações que acompanham a definição
- Uma citação correta descreve aquela resposta, naquele contexto e data; não garante repetição, posição, recomendação ou efeito comercial.
- Formatos e disponibilidade de metadados variam entre APIs e interfaces. A ausência de annotations em uma captura não revela todo o processamento interno.
- O conteúdo da página pode mudar depois da resposta. Uma revisão precisa distinguir o que foi preservado na coleta da versão consultada posteriormente.
- Automação pode localizar links e segmentos, mas decidir suporte factual, ambiguidades e conflitos exige critérios claros e revisão proporcional ao caso. [3]
O que conferir antes de aplicar
- Preservar pergunta e resposta completa, com data e superfície.
- Separar URL recuperada, link navegacional e citação atribuída.
- Conferir o trecho citado e a URL final.
- Declarar unidades, denominadores e itens não verificáveis.
- Manter exemplos didáticos separados de resultados coletados.
Fontes utilizadas nesta página
As referências do Glossário Quaerion priorizam documentação oficial, pesquisa original e metodologia pública quando o conceito é operacional ou proprietário. Cada fonte sustenta uma parte identificável da definição, do mecanismo ou dos limites descritos neste verbete. O link não significa que o provedor endosse a Quaerion nem que tenha adotado nossa terminologia.
- 01OpenAI — Web search: output, citations and sources ↗
Documenta annotations e sources, permitindo distinguir atribuições finais de URLs consultadas.
- 02Google — Grounding with Google Search ↗
Explica a associação entre segmentos da resposta, groundingSupports e fontes em groundingChunks.
- 03OpenAI — Evaluation best practices ↗
Sustenta o uso de critérios específicos, registro de casos e revisão humana; não define as taxas editoriais propostas aqui.
