Cole o conteúdo do robots.txt e o endereço da página — a ferramenta determina se o rastreamento está liberado para o bot escolhido e mostra a regra que prevaleceu.
Funciona no navegador — os dados não são enviados a nenhum servidorA correspondência é igual à do Google: escolhe-se o grupo do bot (ou *) e, entre as regras aplicáveis, vence a mais longa; em caso de empate, Allow prevalece sobre Disallow. Aceita * e $ nos caminhos. Um Disallow vazio significa "tudo permitido".
Contagem de caracteres e pixels, com pré-visualização do snippet no Google.
Frequência de palavras e frasesTop de palavras, bigramas e trigramas do texto — com filtro de stop words.
Gerador de robots.txtMonte o robots.txt: bloqueios, diretivas prontas e link do sitemap.
Sitemap.xml a partir de lista de URLsCole os endereços e receba o arquivo do mapa do site pronto.
Coletamos e organizamos dados de sites: preços, produtos, contatos e avaliações — no formato e na frequência de que você precisa.