O serviço disponibiliza uma pré-visualização do arquivo robots.txt gerado para o administrador do serviço:
Observe que ele é composto por configurações de parâmetros e critérios para cada user-Agent cadastrado.
Uma vez configurado o robots.txt de uma solução, pode-se visualizar a sua composição do robots.txt (clicando em Visualizar Robots) ou acessar o arquivo gerado dinamicamente, pela URL da solução, acrescentando "/robots.txt". Ex: "http://cellservices.com.br/robots.txt".
As URLs da solução onde o robots.txt estará disponível, são aquelas cadastradas como valor da property bag lumis.service.seo.robotstxt.url no canal da instância de serviço de Robots.txt. Se não houver valor cadastrado para essa propriedade, será utilizado o valor do elemento frameworkURL localizado no arquivo de configuração do portal em lumisdata/config/lumisportalconfig.xml. O robots.txt também ficará disponível para a URL cadastrada na propriedade website das propriedades gerais do canal da solução.
Observações |
|
1. Nas configurações ou no property bag, a porta na URL precisa estar explicitada. Por exemplo, ao invés de http://meuhost, precisa ser http://meuhost:80. 2. Quando mais de uma instância de serviço de robots.txt estiver mapeada para a mesma URL, qualquer instância de robots.txt poderá ser consultada.
3. Os robôs de busca procuram o arquivo robots.txt na raiz do site. Isto será possível apenas se o Lumis Portal estiver instalado no contexto raiz, pois caso contrário ele não poderá disponibilizar o robots.txt na raiz do site. |
|