CrawlerCheck
Visitas mensuales
34.675
2026-09
Crecimiento mensual +6,9 %

CrawlerCheck - Comprueba si los rastreadores de búsqueda e IA acceden a tus páginas

CrawlerCheck prueba una URL e indica si los agentes de usuario compatibles de buscadores e IA tienen permitido el acceso o están bloqueados. Analiza robots.txt, las etiquetas meta robots y los encabezados HTTP X-Robots-Tag, y presenta un informe de acceso. Ingresa una URL que comience con https:// para revisar la página de inicio o una página específica.

Visitar sitio webActualizar este producto

0Vistas

Funciones

Informe de acceso de rastreadores

Muestra qué agentes de usuario de rastreadores compatibles tienen acceso permitido o bloqueado a una URL. Ingresa la URL de una página y CrawlerCheck revisa sus directivas robots.txt, etiquetas meta robots y encabezados HTTP X-Robots-Tag.

Verificación de rastreadores de búsqueda

Comprueba si los rastreadores de buscadores, incluidos Googlebot y Bingbot, pueden acceder a una página. Ingresa su URL para comparar el acceso según las directivas y los encabezados del sitio.

Verificación de rastreadores de IA

Comprueba si rastreadores de IA compatibles, como ChatGPT-User, Claude y Perplexity, tienen acceso permitido o están bloqueados. Envía la URL de una página para ver lo que indican robots.txt, las etiquetas meta robots y los encabezados HTTP.

PreciosGratis

CrawlerCheck está disponible gratis y las páginas proporcionadas no muestran planes de pago. Úsalo para revisar el acceso de rastreadores a una URL; no hay planes que comparar.

Casos de uso

Revisar el acceso de rastreadores a una página

Cuando necesitas verificar el acceso a la página de inicio o a otra página, ingresa su URL y ejecuta una revisión. CrawlerCheck informa si los rastreadores de búsqueda e IA compatibles tienen acceso permitido o están bloqueados, según las reglas robots.txt, las etiquetas meta robots y los encabezados X-Robots-Tag.

Comparar el acceso de bots de búsqueda e IA

Cuando distintos bots pueden recibir instrucciones de rastreo diferentes, prueba la URL de una página con CrawlerCheck. El informe muestra qué agentes de usuario compatibles de buscadores e IA tienen acceso permitido o están bloqueados, para revisar las reglas de cada rastreador.

Limitaciones

  • La URL ingresada para la revisión debe incluir el protocolo https://; el formulario rechaza las URL que no lo incluyen.

Para quién es

  • Profesionales de SEO que revisan reglas de acceso de rastreadores en sitios de clientes o administrados

  • Administradores web que verifican el acceso de rastreadores de búsqueda e IA a páginas específicas

Preguntas frecuentes

¿Cómo compruebo si mi sitio bloquea a Googlebot?

Ingresa la URL que quieres revisar y ejecuta CrawlerCheck. Analiza robots.txt, las etiquetas meta robots y los encabezados HTTP para informar si Googlebot puede rastrear la página o está bloqueado.

¿Puedo comparar el acceso de Bingbot y Googlebot?

Sí. Revisa la URL de una página para consultar el acceso de Googlebot, Bingbot y otros rastreadores de búsqueda compatibles. El informe puede mostrar qué bots tienen acceso permitido y cuáles están bloqueados.

¿Puedo revisar rastreadores de IA como ChatGPT o Perplexity?

Sí. CrawlerCheck informa sobre rastreadores de IA compatibles, incluidos ChatGPT-User, Claude y Perplexity. Revisa las reglas robots.txt, las etiquetas meta robots y los encabezados HTTP de la página.

¿Puedo revisar una página que no sea la de inicio?

Sí. Ingresa la URL de una página específica, como una página de producto o de contenido más profunda. La revisión informa el acceso de rastreadores para la URL que enviaste.

Enlaces oficiales

Comentarios

Por favor inicia sesión para dejar un comentario.
Aún no hay comentarios. ¡Sé el primero en compartir tu opinión!