¿Qué es Meta-WebIndexer? User agent y reglas de robots.txt

Meta-WebIndexer analiza contenido de la web para mejorar los resultados de búsqueda de Meta AI. Permitirlo deja que Meta AI cite tus páginas en sus respuestas.

Búsqueda con IA Sigue el robots.txt Meta

User agent de Meta-WebIndexer

Según la documentación de Meta. El número de versión cambia; identifícalo por el token.

User agent
meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)

Reglas de robots.txt para Meta-WebIndexer

Pega uno de los bloques en el robots.txt de la raíz de tu dominio. El cambio puede tardar hasta un día en leerse. ¿No sabes qué hace tu archivo ahora? Usa el verificador de robots.txt para IA.

Bloquear Meta-WebIndexer

Bloquea todas las rutas para Meta-WebIndexer. Así tus páginas quedan fuera del índice de búsqueda con IA de Meta, y sus respuestas no pueden citarlas.

robots.txt
User-agent: meta-webindexer
Disallow: /

Permitir Meta-WebIndexer

Permite a Meta-WebIndexer acceder a todas las rutas, diga lo que diga “User-agent: *”.

robots.txt
User-agent: meta-webindexer
Allow: /

Conviene saber

Meta dice que sus crawlers pueden guardar tu robots.txt en caché hasta 24 horas.

Empresa Meta
Para qué sirveBúsqueda con IA
robots.txtSigue el robots.txt
Token en robots.txtmeta-webindexer
Rangos de IPNo publicados
¿Meta-WebIndexer puede acceder a tu sitio? Escribe tu dominio: leemos tu robots.txt y te mostramos el estado de Meta-WebIndexer.

Preguntas sobre Meta-WebIndexer

¿Qué es Meta-WebIndexer?

Meta-WebIndexer analiza contenido de la web para mejorar los resultados de búsqueda de Meta AI. Permitirlo deja que Meta AI cite tus páginas en sus respuestas.

¿Cómo bloqueo Meta-WebIndexer?

Añade “User-agent: meta-webindexer” y “Disallow: /” a tu robots.txt. Así tus páginas quedan fuera del índice de búsqueda con IA de Meta, y sus respuestas no pueden citarlas.

¿Meta-WebIndexer respeta el robots.txt?

Sí. Meta dice que Meta-WebIndexer sigue las reglas de robots.txt escritas para él.

¿Cuál es el user agent de Meta-WebIndexer?

Meta lo documenta como “meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)”. El número de versión cambia, así que identifícalo por “meta-webindexer”.

¿Cómo compruebo los accesos de Meta-WebIndexer?

Meta no publica una lista de IP para Meta-WebIndexer. Toma el user agent como un indicio, no como una prueba.

Fuente: developers.facebook.com, comprobada el 17 de nov. de 2026. Directorio de bots y crawlers de IA

Los archivos son el comienzo. Lo que importa son las respuestas.

Las preguntas de tus clientes en hasta 8 motores de IA, con la frecuencia que elijas y con historial. Mide tu visibilidad en IA.