E1 · IndexNow e Bing
25 minConfira o sitemap no Bing Webmaster, publique a chave IndexNow e avise 3 URLs novas ou alteradas que respondem 200.
Pronto quando: o Bing mostra o sitemap com status de sucesso e o aviso IndexNow respondeu 200 ou 202.
Aula 5 · 18 min
O Bing alimenta o Copilot e tem o único painel oficial de citações; e um estudo achou boa parte das citações do ChatGPT entre os primeiros resultados do Bing. Avisar o Bing custa pouco. Do outro lado, o log do servidor diz quem lê o site de verdade: quais robôs de IA, para que finalidade e quais são falsos.
Começar a aula
Objetivo: conferir o site no Bing com IndexNow e ler no log quais robôs de IA visitam de verdade, separados por finalidade.
Clique em cada bloco.
Avise o Bing, depois confira no log quem veio de verdade.
Clique em cada passo.
Confira no Bing Webmaster que o sitemap foi lido com sucesso (curso 1, aula 3). Sem isso, nem o AI Performance nem o IndexNow rendem.
Publique a chave em um arquivo .txt na raiz do site e avise as URLs novas depois de cada publicação. O script do método confere o 200 antes de avisar.
No INEMA: 109 URLs avisadas com resposta 202 em 24/09/2026 e 90 URLs com 200 em 02/10/2026.
No servidor (nginx ou Apache), copie o access log para o seu computador. Atrás de CDN, use o log da CDN: o do servidor só vê o que passou por ela.
IP de pessoa é dado pessoal (LGPD): antes de mostrar a alguém, guarde só as linhas de robô.
Rode o botlog (inemaseo-sistemas, MIT) ou filtre à mão por User-Agent. Olhe três coisas: que finalidade aparece, quantos falsos há e se algum robô de busca recebeu 403.
Só robôs de treino no log e nenhum de busca: o site pode estar fora do índice das IAs de busca. Confira o robots.txt e a CDN (curso 1, aula 6).
O primeiro bloco é do método inemaSEO (só modelo: precisa da sua chave). O segundo lê o log no seu computador; ensino detalhado no curso 7.
# urls.txt: uma URL por linha, todas do mesmo host # a chave IndexNow fica publicada em https://seusite.com/<chave>.txt INDEXNOW_KEY=<chave> tools/avisar_buscadores.sh urls.txt # confere o 200 de cada URL antes de avisar; para se alguma não responder 200
git clone https://github.com/inematds/inemaseo-sistemas && cd inemaseo-sistemas/ferramentas/botlog # copie o log do servidor (só leitura) ssh usuario@SEU_SERVIDOR 'cd /var/log/nginx; zcat -f access.log.*.gz; cat access.log.1 access.log' > /tmp/site.log # relatório por finalidade, com IP conferido nas listas oficiais python3 botlog.py analisar /tmp/site.log --sitemap https://seusite.com/sitemap.xml --saida saida/site # LGPD: antes de compartilhar, guarde só as linhas de robô com IP oficial python3 botlog.py filtrar /tmp/site.log --saida /tmp/so-robos.log
botlog no log real de desenho.inema.pro (05 a 19/10/2026), já filtrado só com robôs de IP oficial:
8 linhas, 8 de robô (treino 6, busca 2); falsos 0 robo finalidade acessos paginas robots_txt 4xx/5xx GPTBot treino 4 2 0 0 ClaudeBot treino 2 2 1 0 OAI-SearchBot busca 2 1 2 1
Na amostra montada do repositório (IPs de documentação, User-Agents oficiais), o relatório acusa:
Sem acesso ao log? Faça o E2 com o exemplo do repositório.
Confira o sitemap no Bing Webmaster, publique a chave IndexNow e avise 3 URLs novas ou alteradas que respondem 200.
Pronto quando: o Bing mostra o sitemap com status de sucesso e o aviso IndexNow respondeu 200 ou 202.
Rode o botlog no log do seu site (ou no exemplo REAL do repositório) e anote os acessos por finalidade, os falsos e os 403 para robô de IA.
Pronto quando: uma anotação com a contagem por finalidade (busca, ação do usuário, treino), o número de falsos e a lista de 403 (ou "nenhum").
A explicação aparece depois da sua resposta.
Pergunta 1 de 4
"O ChatGPT usa o índice do Bing." Como dizer isso com honestidade?competência
Pergunta 2 de 4
O log mostra 30 acessos de "GPTBot" vindos de um IP fora da lista da OpenAI. O que são?
Pergunta 3 de 4
O OAI-SearchBot recebe 403 no log, mas o robots.txt libera. Onde olhar?
Pergunta 4 de 4
Por que procurar Google-Extended no log não funciona?
Escolha uma alternativa. A explicação aparece depois da sua tentativa.