Herramienta gratuita de SearchVector
Consultar sitio web Crawlability
Analiza tu robots.txt y verifica si los motores de búsqueda pueden rastrear e indexar tus páginas web. Parte del kit de herramientas gratuito SEO de SearchVector.
Try:
Fetch
Pull the site’s robots.txt.
Parse
Read every crawl directive.
Rules
Match rules per user-agent.
Index
Confirm indexability.
Sitemap
Detect the sitemap.
Report
Show the full verdict.
example.com/robots.txt
Crawlable
Response Time
0.42s
Crawl Health
92
Healthy
Indexable Pages
248
+12%
Crawl Access
PATH
ACCESS
Googlebot
/
Allowed
Bingbot
/
Allowed
*
/admin
Blocked
AhrefsBot
/
Blocked
example.com/robots.txt
Crawlable
Response Time
0.42s
Crawl Health
92
Healthy
Indexable Pages
248
+12%
Crawl Access
PATH
ACCESS
Googlebot
/
Allowed
Bingbot
/
Allowed
*
/admin
Blocked
AhrefsBot
/
Blocked
example.com/robots.txt
Crawlable
Response Time
0.42s
Crawl Health
92
Healthy
Indexable Pages
248
+12%
Crawl Access
PATH
ACCESS
Googlebot
/
Allowed
Bingbot
/
Allowed
*
/admin
Blocked
AhrefsBot
/
Blocked
Fetch
Pull the site’s robots.txt.
Parse
Read every crawl directive.
Rules
Match rules per user-agent.
Index
Confirm indexability.
Sitemap
Detect the sitemap.
Report
Show the full verdict.
Garantizar los motores de búsqueda Encuentra tu contenido
Si los motores de búsqueda no pueden rastrear sus páginas, no aparecerán en los resultados de búsqueda. Nuestra herramienta de rastreo analiza su archivo robots.txt para identificar posibles problemas de indexación.
Esta herramienta gratuita proporciona comprobaciones instantáneas de rastreabilidad. Para una auditoría técnica integral de SEO con monitoreo continuo e informes detallados, explore el panel de SearchVector.
What you get
04 items
Robots.txt Analysis
01
Analice y analice su archivo robots.txt para comprender las directivas de rastreo para diferentes agentes de usuario.
Verificación de indexabilidad
02
Verifique si sus páginas pueden ser indexadas por los principales motores de búsqueda como Google y Bing.
Resultados instantáneos
03
Obtenga comentarios inmediatos sobre el estado de rastreabilidad de su sitio sin esperar.
Gratis para siempre
04
No requiere registro. Parte de nuestro kit gratuito de herramientas SEO para todos.
3 pasos para Comprobar rastreabilidad
Analice la rastreabilidad de su sitio en segundos
Ingrese su URL
Pegue su sitio web URL. Buscaremos y analizaremos automáticamente su archivo robots.txt.
Obtener análisis
Nuestra herramienta analiza su robots.txt y verifica las reglas de rastreo/indexación para Google y Bing.
Revisar resultados
Consulte el estado detallado de la capacidad de rastreo y el contenido completo de robots.txt para su revisión.
Potentes funciones
Todo lo que necesitas para comprobar la rastreabilidad del sitio web
01
Robots.txt Parser
Busque y analice automáticamente archivos robots.txt para comprender las directivas de rastreo.
02
Verificación multimotor
Verifique la capacidad de rastreo de los motores de búsqueda Google y Bing.
03
Instant Analysis
Obtenga resultados inmediatos sin esperar largos rastreos.
04
Index Status
Verifique si sus páginas pueden indexarse en los resultados de búsqueda.
05
Vista completa de Robots.txt
Consulte el contenido completo de robots.txt para una revisión manual.
06
DNTTOken0 e ilimitado
Verifique URL ilimitados sin necesidad de registrarse.
Frequently Asked Questions
Todo lo que necesitas saber sobre la rastreabilidad de un sitio web
¿Qué es robots.txt?
Robots.txt es un archivo de texto que indica a los rastreadores de los motores de búsqueda qué páginas o secciones de su sitio no deben rastrearse. Se coloca en el directorio raíz de su sitio web y ayuda a administrar el tráfico del rastreador.
¿Este verificador de rastreabilidad es gratuito?
¡Sí! El Web Page Crawler es completamente gratuito y no es necesario registrarse. Es parte del kit de herramientas gratuito SEO de SearchVector. Para una auditoría técnica integral de SEO, consulte nuestro panel de control.
¿Por qué es importante la capacidad de rastreo para SEO?
Si los motores de búsqueda no pueden rastrear sus páginas, no serán indexadas y no aparecerán en los resultados de búsqueda. La capacidad de rastreo de Proper garantiza que su contenido pueda ser descubierto y clasificado.
¿Qué otras herramientas SEO ofrece SearchVector?
SearchVector ofrece una plataforma SEO completa que incluye Keyword Research en 5 plataformas, GSC Analytics, Live Rank Tracker, Sitemap Analyzer, monitoreo de Core Web Vitals, herramientas YouTube SEO y más en nuestro panel.
¿Qué pasa si mi sitio no tiene un archivo robots.txt?
Si no hay ningún archivo robots.txt, los motores de búsqueda suponen que pueden rastrear todas las páginas de su sitio. Si bien esto está bien para la mayoría de los sitios, tener un robots.txt le brinda más control sobre el comportamiento del rastreador.
Still have questions? Contact support
Ready to go further?
¿Listo para mejorar tus rankings de búsqueda?
La verificación de la capacidad de rastreo es solo el comienzo. El panel de SearchVector le brinda poderosas herramientas SEO: Keyword Research en 5 plataformas, integración de GSC Analytics, Live Rank Tracker para monitoreo SERP en tiempo real, Core Web Vitals Analytics, herramientas de optimización YouTube y más. Únase a miles de especialistas en marketing que aumentan su tráfico orgánico.
Free to start. No credit card required.