Ao escrever texto nas tabelas, este depois aparece na Web mais ou menos no mesmo lugar, mas não é assim no código da página. E isto é o que vale para os robôs, já que sempre se fixam nos primeiros carateres de texto que estão mais acima. Por isso é importante assegurar-se que as palavras-chave estejam nas primeiras células da primeira linha, no caso de trabalhar com tabelas.
Páginas com frames
Há muitas páginas que seguem sendo construídas com frames. E aqui há que prestar atenção, já queos spiders sempre procuram as páginas que distribuem os diferentes frames e às vezes o usuário não lhes presta demasiada atenção. Elas também devem ser otimizadas, e para isso devem ser editadas para que se lhes acrescente as metatags necessárias, como de título, descrição e palavras-chave. Também se pode usar a tag "noframes" para incluir mais informação, além de links para o resto das páginas interiores, para que estas também possam ser indexadas.
Texto em imagens
Embora se reconheça que armar um website só com texto pode resultar algo aborrecido, também se pode aproveitar as imagens. Os logos, fotos ou gráficos podem ser acompanhados por um texto que explique um pouco mais o que se está vendo. É o que sempre se vê numa caixa de texto amarela quando se passa o cursor do mouse em cima da imagem. É importante incluir estes textos, já que os robôs podem lê-los. Para agregar palavras ou frases à imagem só é preciso inserir o comando ALT nos dados da imagem dentro do código html. Um exemplo:
IMG SRC="http://www.todomagia.com/mago.jpg" ALIGN="RIGHT" ALT="Mais de 1000 truques para os estudantes de magia" (todo o comando encerrado entre <>)
Guardas, a mim
Embora se deva "flertar" com os robôs das ferramentas de busca, também se pode usar um pouco mais de firmeza e dar-lhes algumas ordens. Como por exemplo, que indexe a página a que chegou e todas as que seja linkadas a ela. Para isso, há que escrever o seguinte no código html (sempre no espaço entre "head" e "head":
meta name="ROBOS"content="INDEX,FOLLOW" (todo encerrado entre <>)
Outra ordem útil é a que regula o intervalo de tempo até a próxima visita do spider. Isto é importante, especialmente para aquelas páginas que se atualizam periodicamente. Um exemplo:
meta name="revisit-after" content="15 Days" (todo encerrado entre <>)
O arquivo robots.txt Este arquivo tem que ligar-se ao diretório raiz onde está a página (em nosso exemplo, www.todomagia.com) e tem que ser de texto. Os buscadores, quando lançam seus robôs, procuram este arquivo em primeiro lugar. Se não o encontram, entendem que têm que indexar todo o lugar, mas não é demais criá-lo para confirmar a inclusão do site na ferramenta de busca. Também se escreve neste arquivo todas as restrições de acesso que o dono do site deseja, como por exemplo páginas desatualizadas ou internas. Estes são alguns comandos que se deve digitar no documento cujo título será robots.txt.
Para indicar a todos os robôs que devem indexar o lugar inteiro:
User-agent: *
Disallow:
Este comando indica a todos os robôs que não têm que indexar o diretório prova:
User-agent: *
Disallow: /prova/
Este comando indica a um robô em especial que não indexe o diretório prova:
User-agent: Googlebot
Disallow: /prova/
