Histórico da Página
| Índice | ||||||||
|---|---|---|---|---|---|---|---|---|
|
Objetivo
...
Este guia visa mostrar como configurar o arquivo robots.txt.
Funcionalidades
...
O arquivo robots.txt é constituído por regras que controlam quais arquivos os rastreadores podem acessar em um site. É recomendável alterar esse arquivo, incluindo todas as configurações necessárias para ser indexado. A partir da atualização 1.7.1-21 o arquivo robots.txt é instalado por padrão na plataforma, no diretório [instalação_fluig]/repository/wcmdir, já configurado para bloquear todos os agentes de rastreamento de arquivos.
Permitir o rastreamento dos arquivos
...
Caso queira permitir o rastreamento dos arquivos no seu site por todos os agentes, deve-se alterar o arquivo robots.txt para:
| Painel |
|---|
User-agent: * Allow: / |
| Nota |
|---|
Lembrando que o procedimento acima não é recomendado, pois torna de conhecimento público a existência do seu site, expondo algumas informações de acesso. Para mais informações de como configurar o arquivo robots.txt, acesse aqui. |
...
Visão Geral
Import HTML Content
Conteúdo das Ferramentas
Tarefas