Pular para o conteúdo
José Enrique Vásquez Valenzuela

Teia GEO IGO

Uma resposta de IA não é uma medição

Perguntar uma vez ao ChatGPT não diz o que as IAs pensam sobre uma marca. Medir exige repetir, comparar e acompanhar a variação.

José Enrique Vásquez Valenzuela ·

Ilustração no estilo de Picasso: um rosto de perfil, pensativo, com a mão no queixo, olhando para quatro balões de conversa de cores diferentes; abaixo, uma linha de gráfico que oscila e depois fica estável, com uma lupa.

A pergunta da Teia GEO IGO é simples: o que as IAs dizem sobre uma marca? A resposta não é. A mesma pergunta pode receber respostas diferentes em momentos diferentes, e cada modelo responde de um jeito.

Por isso a plataforma faz as mesmas perguntas a quatro modelos de linguagem (GPT, Claude, Gemini e Perplexity), repete as perguntas e acompanha a variação ao longo do tempo. A variação vira indicador: os índices de previsibilidade (CPI) e de estabilidade, descritos no preprint publicado no Zenodo.

No programa piloto, com quatro instituições, foram 9.774 pontos de dados e 1.031 alucinações classificadas em camadas de confiança.

Projeto relacionado: Teia GEO IGO →