Testador de robots.txt
Cole, envie ou aponte para um robots.txt. A ferramenta valida a sintaxe segundo o RFC 9309 e testa se uma URL é bloqueada para um bot específico.
A busca é feita pelo servidor do lab — assim o navegador não bloqueia por CORS.
Cole, envie ou aponte para um robots.txt. A ferramenta valida a sintaxe segundo o RFC 9309 e testa se uma URL é bloqueada para um bot específico.
A busca é feita pelo servidor do lab — assim o navegador não bloqueia por CORS.