Falcon Information — Voltar para a página inicial

Fontes de referência encontradas no ChatGPT: métodos de busca e limitações

As respostas encontradas no ChatGPT incluem links para as fontes, o que torna a pergunta "Como o ChatGPT cita?" uma questão comum. A resposta honesta é: a OpenAI não divulga uma fórmula de classificação pública, e qualquer alegação de que alguém possui o "algoritmo de citação" é especulativa. Este artigo apresenta os mecanismos que podem ser confirmados nos documentos oficiais, bem como os métodos de observação que utilizamos na prática, incluindo suas limitações.

Este trecho do artigo

  • ·Mecanismos que podem ser verificados oficialmente.
  • ·Como criar citações?
  • ·Método de consulta fixa
  • ·Limitações do método
  • ·O conteúdo pode ser usado para:
  • ·Como medir o tráfego?

Os três répteis que podem ser confirmados em documentos oficiais:

A OpenAI disponibilizou três agentes de usuário com propósitos distintos, que podem ser controlados separadamente: OAI-SearchBot é usado para criar índices de pesquisa, permitindo que os sites apareçam nos resultados de pesquisa do ChatGPT; ChatGPT-User é uma ferramenta para os usuários solicitarem a leitura de páginas durante uma conversa; e GPTBot é usado para coletar dados de treinamento do modelo. Cada um desses agentes possui suas próprias configurações no arquivo robots.txt. Bloquear o GPTBot não impede a pesquisa no ChatGPT, e para que um site apareça nos resultados de pesquisa, é necessário permitir o uso do OAI-SearchBot.

As três "user agents" da OpenAI: para quais finalidades elas são utilizadas?
User agentUsosComo encontrar referências usando o ChatGPT
OAI-SearchBotCriar um índice de pesquisa e exibir os links.Deve ser aprovado.
ChatGPT-UserOs usuários desejam que a página seja carregada imediatamente após a solicitação.Recomendação: Liberar
GPTBotColetar dados para treinamento de modelosDe acordo com as políticas de licenciamento de conteúdo, você pode decidir por conta própria.

Como ocorrem as citações? Quais são as diferenças entre as citações que podem ser confirmadas e aquelas que não podem?

Pode ser confirmado: a busca no ChatGPT realiza a pesquisa, sintetiza informações de múltiplas fontes para gerar respostas e inclui links para as fontes nas respostas. Não pode ser confirmado: a ordem das fontes, o motivo para escolher A em vez de B, e o peso atribuído às características do conteúdo – isso a OpenAI não divulga publicamente. A maioria dos estudos sobre "fatores de citação do ChatGPT" disponíveis no mercado são inferências reversas feitas por terceiros sobre amostras. Pode ser útil consultar essas informações, mas ao citar essas conclusões, é preciso indicar que são inferências e não regras do sistema. Nossa posição: priorizar a validação dos dados e usar a observação em vez de especulação.

Nossa metodologia de observação: consulta fixa

O método consiste em criar uma lista fixa de perguntas, que devem ser testadas periodicamente no ChatGPT e os resultados devem ser registrados. Os pontos principais são: As perguntas devem ser formuladas de forma a refletir as dúvidas reais que os clientes fazem ao tomar decisões (por exemplo, comparar serviços, perguntar sobre preços). Não devem se limitar a testar apenas o nome da marca, pois este apenas reflete o conhecimento prévio.; Cada teste deve iniciar uma nova conversa para evitar que o contexto influencie as respostas.; Registrar a data, a menção da marca e as fontes/páginas utilizadas para cada pergunta.; Repetir a mesma lista de perguntas mensalmente para observar as tendências, e não apenas os resultados de um único teste. Este método é de baixo custo, envolvendo apenas uma tabela e a manutenção de uma disciplina consistente.

É importante destacar as limitações deste método.

As consultas fixas têm limitações claras, e isso é explicitamente mencionado em nosso relatório: as respostas geradas por IA são aleatórias, e a mesma pergunta pode gerar respostas diferentes de fontes distintas; as respostas são influenciadas pela conta, região e versão do modelo, e o que você observa não representa o que todos os usuários veem; quando o modelo ou o produto são atualizados, todo o conjunto de dados pode ser reavaliado. Portanto, ele só pode responder sobre "as tendências relativas da nossa marca nesta questão", e não pode inferir participação de mercado ou alcance. Relatórios que afirmam "serem recomendados pelo ChatGPT" com base em capturas de tela únicas devem ser considerados com cautela.

O que podemos fazer com o conteúdo?

Em vez de buscar algoritmos obscuros, é mais vantajoso criar uma base sólida e verificável, que sirva tanto para a busca tradicional quanto para todas as plataformas de IA: garantir que o OAI-SearchBot consiga acessar as páginas (verificando os arquivos robots.txt e WAF); assegurar que o conteúdo importante esteja em formato de texto dentro do HTML, e não escondido em elementos interativos; adotar uma estrutura de escrita que responda à pergunta primeiro, antes de detalhar; utilizar evidências e autores identificáveis, pois apenas o conteúdo verificável tem valor para ser citado; garantir que o nome da marca e as informações da empresa sejam consistentes em toda a web, para evitar confusões.

Após a citação, como medir o tráfego?

A URL de referência do ChatGPT fornecida pela OpenAI incluirá automaticamente o parâmetro `utm_source=chatgpt.com`, permitindo criar grupos no GA4 com base em "fonte da campanha" e "fonte da sessão" para o ChatGPT. Isso não significa que todas as exposições do ChatGPT possam ser rastreadas: se não houver cliques, os dados de chegada podem não estar disponíveis. Além disso, mesmo que o aplicativo seja aberto, haja restrições de privacidade, redirecionamentos ou parâmetros sejam removidos, ainda pode ser classificado como referência ou direto. O relatório deve verificar tanto os parâmetros UTM quanto o referrer, e a avaliação do valor deve ser baseada em conversões subsequentes, em vez de apenas no número de sessões.

Referências

Perguntas frequentes

Após bloquear o GPTBot, o conteúdo não aparecerá mais no ChatGPT?
Não é totalmente assim. O GPTBot se concentra na coleta de dados de treinamento, enquanto o OAI-SearchBot utiliza o índice do OAI-Search. A combinação de GPTBot e OAI-Search, teoricamente, ainda pode permitir a busca por citações no ChatGPT. Além disso, os dados de treinamento históricos e o conteúdo republicado por terceiros não estão sujeitos ao controle atual do robots.txt.
O ChatGPT utiliza o índice do Bing para suas buscas?
OpenAI e a Microsoft têm uma parceria, e o ChatGPT utiliza, em parte, o histórico de pesquisa do Bing como base. No entanto, a OpenAI também criou seu próprio índice (OAI-SearchBot), e a situação completa não está documentada oficialmente. A abordagem prática: utilize as Ferramentas para Webmasters do Bing para enviar informações, mas não considere isso como um caminho garantido para o ChatGPT.
Com que frequência é razoável repetir os exames para confirmar os resultados?
Nosso ritmo de avaliação é mensal, combinado com uma revisão trimestral. Avaliar com muita frequência não faz sentido, pois a variação aleatória nas respostas da IA pode mascarar as mudanças reais; avaliar com muita demora dificulta a identificação das interrupções causadas pelas atualizações do modelo. O importante é que as condições de cada teste (perguntas, formulação, novas conversas) sejam consistentes.

Você tem alguma necessidade?

Entre em contato conosco