Google afirma que LLMs.txt é puramente especulativo… por enquanto

John Mueller, do Google, respondeu a uma pergunta sobre se a orientação do Google sobre LLMs.txt é contraditória. Sua resposta mostra por que o Google considera o LLMs.txt especulativo por enquanto e por que o WebMCP, uma proposta apoiada pelo Google, pode ser o que os SEOs e os proprietários de sites deveriam estar investigando.

LLMs.txt, Chrome Lighthouse e orientação do Google

Uma discussão no Reddit questionou sobre as orientações aparentemente conflitantes do Google. A pessoa que fez a pergunta observou que a Central de Pesquisa do Google afirma que os editores não precisam de arquivos especiais de IA, como LLMs.txt, para aparecerem nas experiências de pesquisa de IA. Mas a documentação do Lighthouse Audit do Chrome inclui uma verificação de LLMs.txt, o que cria a percepção de um conflito entre as duas diretrizes.

O Redditor perguntou:

“A Central de Pesquisa do Google diz que você não precisa de arquivos especiais de IA, como LLMs.txt, para aparecer na pesquisa generativa de IA, mas os desenvolvedores do Chrome dizem que LLMs.txt pode ajudar os agentes a entender a estrutura e o conteúdo principal de um site.

Sou anti-LLMs.txt, mas essa orientação é conflitante do Google? Ou estou confundindo “visibilidade da Pesquisa Google” com “usabilidade do agente de IA”?”

Redação técnica clássica que não consegue se comunicar

A pessoa que fez a pergunta aparentemente não entendeu o que a documentação do Chrome Lighthouse Audit dizia porque a documentação estava mal redigida.

Ao contrário do que o Redditor acredita, a página faz não dizem que “LLMs.txt pode ajudar os agentes a entender a estrutura e o conteúdo principal de um site”.

O que é faz O que digo é que LLMS.txt é uma “convenção emergente” e que sem esse arquivo os agentes de IA “poderia gaste mais tempo rastreando o site para entender sua estrutura de alto nível e conteúdo principal.” Essa palavra “poderia”está fazendo muito trabalho pesado porque é uma palavra de proteção que comunica uma possibilidade, não uma certeza.

• O Redditor acredita que a orientação do Chrome traz um benefício.
• Mas a formulação real apenas sugere uma possibilidade.

A orientação do Chrome Lighthouse é um jargão porque usa a frase “convenção emergente” em vez de dizer corretamente que LLMS.txt é apenas uma proposta e não um padrão.

O uso da palavra “pode” é uma escolha ruim porque exige que o leitor infira que o benefício de um LLMs.txt é hipotético e não algo que está acontecendo no momento.

A resposta irônica de Mueller

A resposta de Mueller contém ironia. Ele ressalta que se uma plataforma de IA precisar de um arquivo, forneça-o a eles. Nenhum site de IA realmente exige um LLMs.txt ou o utiliza, então isso é puramente hipotético. A parte irônica é quando ele aponta que proprietários de sites e SEOs estão usando LLMs para analisar o conteúdo HTML a fim de gerar um LLMs.txt para que outro LLM não precise fazer isso.

Resposta de Muller:

“Quando uma plataforma de IA que traz clientes reclama que precisa do arquivo para o seu site, recomendo reservar um tempo para criar um. (Além disso, se você usar um LLM para criar o arquivo para você, isso não significa que o LLM poderia simplesmente… criá-lo para si também?)”

Mueller está apontando a redundância inerente do LLMs.txt.

LLMs.txt é puramente especulativo por enquanto

Depois que Mueller respondeu à pergunta inicial, outro Redditor continuou a discussão sugerindo que o benefício do padrão LLMs.txt proposto é que ele reduziria a quantidade de rastreamento e largura de banda usada, ao mesmo tempo que melhoraria as interações entre um site e agentes de IA.

O Redditor escreveu:

“Você não acha que seria geralmente bom fornecer interfaces amigáveis ​​e leves entre seu site e os LLMs? Considero isso semelhante à velocidade da página como uma coisa boa para a experiência do usuário. Os LLMs consomem muitos recursos, então por que não fazer o que podemos para reduzir o consumo de recursos na recuperação?”

Muller respondeu:

“Acho que ninguém sabe – é puramente especulativo por enquanto (o arquivo existe há anos, mas nenhum dos sistemas de IA o utiliza – o que isso significa?).

Gosto da abordagem WebMCP, bem como das integrações comerciais – elas têm objetivos e processos claros: “Dado que o agente já está em seu site, como ele pode *corretamente* executar a tarefa X?” (por exemplo, determinar o preço final de um produto, incluindo todas as taxas e descontos potenciais).”

Mueller acrescenta um ponto interessante sobre o WebMCP. WebMCP é um padrão da web proposto que aproveita o Model Context Protocol para fazer muito mais do que LLMs.txt.

O WebMCP permite que os agentes de IA descubram e usem funcionalidades do site, tornando mais fácil para eles interagirem com um site em vez de usar o HTML que foi criado para humanos. Isso permite que os agentes de IA façam coisas como comparar produtos, adicionar itens a um carrinho de compras e preencher um formulário de contato. Atualmente, o WebMCP é compatível com o Chrome.

O maior problema pode ser se os sites bloqueiam agentes

A resposta de Mueller continuou com mais uma observação que pode ser a parte mais importante da discussão. Ele sugeriu que a forma mais básica de otimização de agentes é simplesmente garantir que os agentes não sejam impedidos de acessar um site. Na sua opinião, esse obstáculo pode ser mais importante para a maioria dos editores do que questões sobre LLMs.txt.

Ele continuou sua resposta:

“Não creio que exista o equivalente agente de “deixe-me dar uma olhada em 10 sites e ver onde posso comprar X mais rápido” (os usuários não ficarão felizes se o agente comprar um “FerraLamboWagen” só porque é mais fácil de comprar).

Então, especulativamente, presumo que se um agente já estiver em seu site e encarregado de fazer algo, ele ficará feliz em clicar e tentar concluir a tarefa também com a interface do usuário.

É claro que tudo isso pressupõe que a otimização agente mais básica esteja em vigor, a saber: não bloquear agentes. Acho que esse obstáculo será o maior para a maioria dos sites.”

A realidade hoje é que os agentes de IA podem usar a interface de usuário baseada em HTML feita para humanos. Portanto, mesmo que o site não esteja implementando o WebMCP, o agente ainda poderá realizar tarefas. A conclusão é que é cada vez mais importante garantir que os agentes de IA não estejam sendo bloqueados.