SearchVector Logo

SearchVector

Ferramenta Free de SearchVector

Free Página da Web Rastreador

Try:

Fetch

Pull the site’s robots.txt.

Parse

Read every crawl directive.

Rules

Match rules per user-agent.

Index

Confirm indexability.

Sitemap

Detect the sitemap.

Report

Show the full verdict.

example.com/robots.txt

Crawlable

Response Time

0.42s

Crawl Health

92

Healthy

Indexable Pages

248

+12%

Crawl Access

PATH

ACCESS

Googlebot

/

Allowed

Bingbot

/

Allowed

*

/admin

Blocked

AhrefsBot

/

Blocked

example.com/robots.txt

Crawlable

Response Time

0.42s

Crawl Health

92

Healthy

Indexable Pages

248

+12%

Crawl Access

PATH

ACCESS

Googlebot

/

Allowed

Bingbot

/

Allowed

*

/admin

Blocked

AhrefsBot

/

Blocked

example.com/robots.txt

Crawlable

Response Time

0.42s

Crawl Health

92

Healthy

Indexable Pages

248

+12%

Crawl Access

PATH

ACCESS

Googlebot

/

Allowed

Bingbot

/

Allowed

*

/admin

Blocked

AhrefsBot

/

Blocked

Fetch

Pull the site’s robots.txt.

Parse

Read every crawl directive.

Rules

Match rules per user-agent.

Index

Confirm indexability.

Sitemap

Detect the sitemap.

Report

Show the full verdict.

Use uma ferramenta de rastreador de site para verificar se um URL pode ser buscado, se as regras dos robôs bloqueiam o acesso e quais sinais de rastreamento devem ser revisados antes do diagnóstico páginas rastreadas, mas não indexadas.

Parte da plataforma SearchVector

Encontre barreiras de rastreamento antes que a indexação pare

Uma página pode ser publicada, vinculada e rastreada uma vez, mas ainda assim não conseguir obter cobertura de índice se regras de robôs, redirecionamentos, ambiguidade canonical, recursos bloqueados ou sinais de página fracos criarem incerteza.

Use esta ferramenta de rastreamento da web para uma verificação rápida no nível URL. Para rastreamento mais amplo de sites, auditorias agendadas, análise de links internos, cobertura de mapas de sites e histórico de problemas, continue o fluxo de trabalho em SearchVector.

What you get

04 items

Regras de robôs

01

Revise se as diretivas robots.txt impedem que os mecanismos de pesquisa busquem o URL.

Sinais de indexação

02

Use o status de rastreabilidade como a primeira verificação antes de revisar canonical e a qualidade do conteúdo. Resultados instantâneos

Revisão de nível URL

03

Verifique uma página por vez quando os relatórios do Search Console forem rastreados, mas não indexados.

Transferência de auditoria

04

Escale problemas repetidos em um rastreamento completo, mapa do site e auditoria de link interno.

How it works

3 etapas para Verificar rastreabilidade

Analise um URL primeiro e depois decida se o problema de indexação é técnico, canonical ou relacionado ao conteúdo.

01

Insira seu URL

Cole a página exata que você deseja que os mecanismos de pesquisa rastreiem, incluindo protocolo e caminho.

02

Obter análise

Revise o acesso robots.txt e os sinais voltados para o rastreador que podem afetar a descoberta, a capacidade de busca ou o acompanhamento da indexação.

03

Resultados da revisão

Use o resultado para decidir se o problema é acesso de rastreamento, qualidade de indexação ou SEO técnico mais profundo.

Powerful features

Recursos poderosos do Features

Tudo o que você precisa para iniciar a rastreabilidade e a triagem rastreada, mas não indexada

01

Analisador Robots.txt

Buscar robots.txt e destaque diretivas que podem afetar bots de pesquisa comuns.

02

Verificação multimecanismo

Revise o acesso do rastreador da perspectiva dos principais mecanismos de pesquisa.

03

Análise instantânea

Inicie verificações de rastreamento de páginas da web sem esperar por rastreamentos demorados.

04

Triagem rastreada, não indexada

Inicie o diagnóstico confirmando que a página pode ser buscada antes de revisar a qualidade e os sinais canonical.

05

Robots.txt completo Ver

Veja o conteúdo completo do robots.txt para revisão manual.

06

Free e ilimitado

Verifique URLs ilimitados sem necessidade de registro.

Perguntas frequentes sobre Questions

Tudo o que você precisa saber sobre rastreabilidade de sites

O que é robots.txt?

Robots.txt é um arquivo de texto que informa aos rastreadores dos mecanismos de pesquisa quais páginas ou seções do seu site não devem ser rastreadas. Ele é colocado no diretório raiz do seu site e ajuda a gerenciar o tráfego do rastreador.

Este verificador de rastreabilidade é gratuito?

Sim! O Web Page Crawler é totalmente gratuito, sem necessidade de inscrição. Faz parte do kit de ferramentas SEO gratuito do SearchVector. Para auditoria técnica abrangente do SEO, confira nosso painel.

Por que a rastreabilidade é importante para SEO?

Se os mecanismos de pesquisa não conseguirem buscar uma página, eles não poderão avaliá-la para indexação. A rastreabilidade não é o único sinal de classificação, mas é a primeira condição técnica a verificar.

Rastreável significa indexado?

Não. Uma página rastreável ainda pode ser excluída se o Google detectar conteúdo fraco, duplicação, conflitos canonical, baixo valor do link interno ou outros problemas de qualidade.

Que outras ferramentas SEO o SearchVector oferece?

SearchVector oferece uma plataforma SEO completa, incluindo Keyword Research em 5 plataformas, GSC Analytics, Live Rank Tracker, Sitemap Analyzer, monitoramento Core Web Vitals, ferramentas YouTube SEO e muito mais em nosso painel.

E se meu site não tiver um arquivo robots.txt?

Se não houver nenhum arquivo robots.txt, os mecanismos de pesquisa presumem que podem rastrear todas as páginas do seu site. Embora isso seja adequado para a maioria dos sites, ter um robots.txt oferece mais controle sobre o comportamento do rastreador.

Still have questions? Contact support

Pronto para aumentar suas classificações de pesquisa?

A verificação de rastreabilidade é apenas o começo. O painel do SearchVector oferece ferramentas SEO poderosas: Keyword Research em 5 plataformas, integração GSC Analytics, Live Rank Tracker para monitoramento SERP em tempo real, Core Web Vitals Analytics, ferramentas de otimização YouTube e muito mais. Junte-se a milhares de profissionais de marketing que aumentam seu tráfego orgânico.

Free to start. No credit card required.