A tag meta robots é utilizada quando o desenvolvedor não quer que os robôs dos
mecanismos de busca acessem alguma página do seu site. É utilizada também em conjunto com o arquivo robots.txt como cartão de visita para os robôs dos mecanismos de busca, indicando a página inicial do site e também os links que o robô deve seguir a partir dessa página.
Não é uma tag aceita por todos os mecanismos de busca e também não é uma tag muito utilizada pelos desenvolvedores, mas como a utilização dela não é caracterizada como spam por nenhum mecanismo de busca, vale a pena a sua utilização.
Nenhum comentário:
Postar um comentário