Aqui estão as seis comandos mais populares, juntamente com orientações sobre como usá-los meta name = conteúdo .. "robôs" = "index" Este é um dos mais comuns e úteis, comandos menos de meta. Ele simplesmente diz a aranha para adicionar a página ao seu índice, que todos os motores de busca automaticamente fazer de qualquer maneira. Incluí-lo se você gosta, mas sei que ele não vai fazer muita diferença já que todos os motores de busca irá índice de sua página a menos que você lhes dizer para não ..
meta name = "robots" content = "seguir" Este comando solicita que um aranha seguir os links em uma página. Como o comando anterior, é também redundante uma vez que os motores de busca seguir os links automaticamente salvo indicação em contrário meta name = conteúdo .. "robôs" = "noindex" Este é o oposto do comando índice, contando aranhas não indexar uma página. Se a sua página só usa este comando, no entanto, aranhas ainda siga os links na página. Por que você usaria esse comando? Os motores de busca têm dificuldade em ler páginas dinâmicas.
Se você fosse para substituir suas páginas dinâmicas com páginas estáticas, você poderia colocar a tag noindex nas versões dinâmicas. Os motores de busca teria um tempo mais fácil acessar o seu site, porque você dirigiu-los para sua página estática. No seu Webmaster Central de Ajuda, o Google diz: "Pense em criar cópias estáticas de páginas dinâmicas. Embora o índice do Google inclui páginas dinâmicas, elas constituem uma pequena parte de nosso índice.
Se você suspeitar que suas páginas geradas dinamicamente (como URLs contendo pontos de interrogação ) estão causando problemas para o nosso rastreador, você pode criar cópias estáticas dessas páginas. ". meta name = "robots" content = "nofollow" Esta tag diz aranhas para indexar a página, mas não seguir qualquer um dos links na página. Vamos dizer que um de seus parceiros pediram um link em seu site. Embora você se sentiu obrigado a dar-lhe, você realmente não