E1 · IndexNow y Bing
25 minRevisa el sitemap en Bing Webmaster, publica la clave IndexNow y avisa 3 URLs nuevas o modificadas que respondan 200.
Listo cuando: Bing muestra el sitemap con estado de éxito y el aviso de IndexNow respondió 200 o 202.
Clase 5 · 18 min
Bing importa dos veces; los robots de IA en el log del servidor
Bing alimenta a Copilot y tiene el único panel oficial de citas; y un estudio encontró que buena parte de las citas de ChatGPT están entre los primeros resultados de Bing. Avisarle a Bing cuesta poco. Por otro lado, el log del servidor dice quién lee el sitio de verdad: qué robots de IA, con qué finalidad y cuáles son falsos.
Comenzar la clase
En esta clase vas a
- 1Las dos razones para cuidar Bing (y qué es estudio, no hecho)
- 2Avisar a IndexNow solo con URLs que responden 200
- 3Leer el log por finalidad: búsqueda, acción del usuario, entrenamiento
- 4Encontrar bots falsos y bloqueos de CDN en el log
Objetivo: revisar el sitio en Bing con IndexNow y leer en el log qué robots de IA lo visitan de verdad, separados por finalidad.
01Quién encuentra, quién lee, quién cita
Haz clic en cada bloque.
Haz clic en cada bloque del diagrama para ver qué hace.
Avisa a Bing y luego revisa en el log quién llegó de verdad.
02En la práctica, en cuatro pasos
Haz clic en cada paso.
1. Sitemap en Bing
Confirma en Bing Webmaster que el sitemap se leyó con éxito (curso 1, clase 3). Sin eso, ni AI Performance ni IndexNow rinden.
2. IndexNow
Publica la clave en un archivo .txt en la raíz del sitio y avisa las URLs nuevas después de cada publicación. El script del método revisa el 200 antes de avisar.
En INEMA: 109 URLs avisadas con respuesta 202 el 24/09/2026 y 90 URLs con 200 el 02/10/2026.
3. Obtener el log
En el servidor (nginx o Apache), copia el access log a tu computadora. Si hay una CDN delante, usa el log de la CDN: el del servidor solo ve lo que pasó por ella.
La IP de una persona es dato personal (LGPD): antes de mostrarla a alguien, guarda solo las líneas de bots.
4. Leer por finalidad
Ejecuta botlog (inemaseo-sistemas, MIT) o filtra a mano por User-Agent. Mira tres cosas: qué finalidad aparece, cuántos falsos hay y si algún bot de búsqueda recibió 403.
Lectura común
Solo bots de entrenamiento en el log y ninguno de búsqueda: el sitio puede estar fuera del índice de las IAs de búsqueda. Revisa robots.txt y la CDN (curso 1, clase 6).
03IndexNow y botlog
El primer bloque es del método inemaSEO (solo modelo: necesita tu clave). El segundo lee el log en tu computadora; la enseñanza detallada está en el curso 7.
avisar_buscadores.sh (inemaseo-metodo)
# urls.txt: una URL por línea, todas del mismo host # la clave IndexNow queda publicada en https://seusite.com/<chave>.txt INDEXNOW_KEY=<chave> tools/avisar_buscadores.sh urls.txt # confirma el 200 de cada URL antes de avisar; se detiene si alguna no responde 200
botlog (inemaseo-sistemas)
git clone https://github.com/inematds/inemaseo-sistemas && cd inemaseo-sistemas/ferramentas/botlog # copia el log del servidor (solo lectura) ssh usuario@SEU_SERVIDOR 'cd /var/log/nginx; zcat -f access.log.*.gz; cat access.log.1 access.log' > /tmp/site.log # informe por finalidad, con IP verificada en las listas oficiales python3 botlog.py analisar /tmp/site.log --sitemap https://seusite.com/sitemap.xml --saida saida/site # LGPD: antes de compartir, guarda solo las líneas de robot con IP oficial python3 botlog.py filtrar /tmp/site.log --saida /tmp/so-robos.log
Ejemplo del repositorio
botlog en el log real de desenho.inema.pro (05 a 19/10/2026), ya filtrado solo con robots de IP oficial:
8 linhas, 8 de robô (treino 6, busca 2); falsos 0 robo finalidade acessos paginas robots_txt 4xx/5xx GPTBot treino 4 2 0 0 ClaudeBot treino 2 2 1 0 OAI-SearchBot busca 2 1 2 1
En la muestra armada del repositorio (IPs de documentación, User-Agents oficiales), el informe señala:
- 4 falsos: GPTBot, Googlebot y PerplexityBot desde una IP fuera de la lista oficial.
- Un 403 para ClaudeBot, que simula un bloqueo de CDN.
- Una página del sitemap que ningún robot leyó.
- El log muestra una solicitud, no una cita.
- Detrás de una CDN, la IP puede ser la de la CDN: usa el log de ella.
- Una lista de IP vieja genera falsos "falsos": actualízala.
04Práctica: avisar y verificar
¿Sin acceso al log? Haz el E2 con el ejemplo del repositorio.
E2 · Robots por finalidad
30 minEjecuta el botlog en el log de tu sitio (o en el ejemplo REAL del repositorio) y anota los accesos por finalidad, los falsos y los 403 para robots de IA.
Listo cuando: una anotación con el conteo por finalidad (búsqueda, acción del usuario, entrenamiento), el número de falsos y la lista de 403 (o "ninguno").
05Prueba lo que aprendiste
La explicación aparece después de tu respuesta.
Pregunta 1 de 4
"ChatGPT usa el índice de Bing." ¿Cómo decir esto con honestidad?competencia
Correcto
Indicio de un estudio con muestra pequeña. Buen motivo para avisar a Bing, no una promesa sobre ChatGPT.No es esa
Indicio de un estudio con muestra pequeña. Buen motivo para avisar a Bing, no una promesa sobre ChatGPT.Repasar: Quién encuentra, quién lee, quién citaPregunta 2 de 4
El log muestra 30 accesos de "GPTBot" desde una IP fuera de la lista de OpenAI. ¿Qué son?
Correcto
Cualquiera puede escribir un User-Agent. Sin la IP en la lista oficial, no lo cuentes como robot de OpenAI.No es esa
Cualquiera puede escribir un User-Agent. Sin la IP en la lista oficial, no lo cuentes como robot de OpenAI.Repasar: Quién encuentra, quién lee, quién citaPregunta 3 de 4
OAI-SearchBot recibe 403 en el log, pero el robots.txt lo permite. ¿Dónde mirar?
Correcto
robots.txt pide; la CDN impone. Un 403 para un robot de IA suele ser una regla de la CDN.No es esa
robots.txt pide; la CDN impone. Un 403 para un robot de IA suele ser una regla de la CDN.Repasar: IndexNow y botlogPregunta 4 de 4
¿Por qué buscar Google-Extended en el log no funciona?
Correcto
Google-Extended controla el uso para entrenar Gemini, sin robot propio. No afecta la Búsqueda de Google.No es esa
Google-Extended controla el uso para entrenar Gemini, sin robot propio. No afecta la Búsqueda de Google.Repasar: Quién encuentra, quién lee, quién citaPrueba terminada
Acertaste {a} de {n}. Si aciertas todas, la clase se marca como completada.Elige una alternativa. La explicación aparece después de tu intento.
06Para llevar
BingAvisa con IndexNow solo URLs 200; Bing alimenta a Copilot y es el único panel de citas.
RegistroLee por finalidad, confirma la IP y busca 403 para robots de IA.
La vara de 2026ChatGPT–Bing es un indicio del estudio de Seer, no una declaración de OpenAI. El registro muestra solicitudes, no citas.