Falarei hoje de algo que não é exatamente novo, mas como a cada dia temos novos fazedores de site, nunca é demais evidenciar o que é importante.

O Robots.txt nada mais é que um arquivo texto que é lido pelos robôs(bots) dos sistemas de busca como Google, Yahoo…

O que este arquivo de texto faz é informar ao robô quais diretórios e/ou arquivos não deve acessar, fora os diretórios/arquivos informados neste arquivo ele automaticamente pega tudo que tem no seu site, diretórios, sub-diretórios, arquivos.

Caso você não utilize este arquivinho os buscadores indexam o site todo, ou seja, se seu site tiver uma área reservada, intranet, extranet, o que for, sem esse arquivo, tudo isso será indexado, inclusive aquelas informações confidenciais que seu concorrente adoraria saber.

Sem mais delongas, o que deve ser colocado nesse arquivo?

Agora vem um processo muito “complexo”, primeiro devo destacar novamente que devem criar o arquivo exatamente com esse nome:
robots.txt

Não pode ser .html .php nada disso, deve ser exatamente robots.txt, um arquivo texto simples, use o notepad para criar se quiser.
Este arquivo deve ser colocado na raiz do seu site, será a primeira coisa lida pelo robozinho.

Agora alguns exemplos de como escrever esse seu arquivo.

Para que nada no site seja indexado por nenhum mecanismo de busca insira dentro do arquivo texto o seguinte:

User-agent: *
Disallow: /

O * ali indica que todos os buscadores devem obedecer o que vem na linha a seguir.
E o / significa todos os diretórios, e disallow é negar o acesso.
Logo ali estamos dizendo que para todos os buscadores devemos negar o acesso a todos os diretórios.
Pronto, seu site não será indexado.

Bom supondo que tenhamos um diretório chamado “admin” que deve ser bloqueado a todo custo dos buscadores, pois ali guardamos muita informação valiosa, e que não pode de forma alguma cair nas mãos maléficas da concorrência, como proteger esse diretório?
Simples assim:

User-agent: *
Disallow: /admin/ #diretorio bloqueado

O sinal #(tralha), serve como comentário, o que vem após dele não interfere na definição das regras de acesso.

Mas veja bem, na realidade, aquele diretório que bloqueamos tem apenas um arquivo que é importante e altamente secreto, que é o “formula_da_cocacola.doc”, o restante gostaria que fosse indexado.
Perfeito, porque não disse antes? Neste caso vamos bloquear apenas o segredo industrial mais bem guardado do século, e o faremos da seguinte forma:

User-agent: *
Disallow: /admin/formula_da_cocacola.doc #XooOOoo buscadores.


Agora para resumir, caso queira bloquear mais de um arquivo/diretório pode fazer assim:

User-agent: *
Disallow: /admin/ #diretorio bloqueado
Disallow: /intranet/ #diretorio bloqueado
Disallow: /segredos_roubados/formula_da_cocacola.doc #aqui nao, TOP SECRET.

No exemplo acima bloqueamos o acesso completo aos diretórios “admin” e “intranet”, e também ao arquivo “formula_da_cocacola.doc”, que está dentro do diretório “segredos_roubados”, o restante dos arquivos do diretório “segredos_roubados” está livre para ser indexado pelos buscadores.
E para finalizar, caso queira bloquear um determinado arquivo/diretório de apenas um buscador, basta ao invés do * em User-agent, escrever o nome do agente/buscador a ser bloqueado, assim:


User-Agent: Googlebot
Disallow: /admin/ #diretorio bloqueado

Oppsss acabamos de bloquear o acesso do google ao diretório “admin”.

Simples e eficaz.

Boa semana a todos!

Que os frames são parte da herança da internet dita 1.0, que seu utilizo massivo como era feito muitos anos atrás é desaconselhado hoje, acho que a maioria dos fazedores de site já sabe, mas porque é desaconselhado?

A Google, considera o frame “fora dos modelos conceituais da web atual”, declarando no seu centro de assistência ao “Fazedor de Site” :D:
“Se nosso motor de busca determina que a busca de um usuário encontra resultados em uma página na sua totalidade, a página inteira é retornada, ainda se com frames; porém, se a busca encontra resultado no interno de um único frame da página, devolvemos apenas o frame em questão, e não toda a página.”

Portanto acho que podemos entender melhor agora o porquê é desaconselhado, não creio que seja do interesse de alguém que um visitante abra um pedaço apenas da sua página, muitas vezes sem ter o que fazer a partir dali, perdido esse visitante é realmente perdido, vai embora, provavelmente não volta mais.

Mas vejam, desaconselhado não é proibido, o iframe principalmente ainda pode ser útil em algumas situações, como upload de arquivos de forma assíncrona(gmail usa), mas utilizar frames para montar o layout, exibir conteúdo, a menos que queiram perder visitas é altamente desaconselhado.

Mas afinal, alguém ainda usa frames?

Vou escrever rapidinho aqui para dizer do serviço ao qual fui apresentado essa semana, o blogblogs, seria como um Technorati Tupiniquim, me inscrevi e curti bastante, bastante intuitivo, realmente simples de usar e com muitas ferramentas, cadastre-se é grátis

BlogBlogs.Com.Br

Texto retirado do site do próprio Google Referências AdSense:

O que é o recurso Referências do Google AdSense?

Referências é um recurso do AdSense que permite aos editores de sites da Web aumentar a sua receita enquanto aumentam simultaneamente o interesse dos seus usuários em produtos e serviços úteis. Ao adicionar um botão de referência ao seus sites, os editores podem direcionar os usuários a produtos como o AdSense e o Firefox com a Barra de ferramentas Google. Quando uma referência conecta um usuário ao AdSense ou ao Firefox, o Google paga ao editor. Agora, os editores podem introduzir os seus visitantes a serviços que os ajudarão a lucrar com seus sites ou a melhorar a experiência de navegação na Web e obter mais receita.

Essa explicação é a melhor para descrever o serviço, apenas uma ressalva, que é inclusive o motivo do post, a partir de hoje, é possível para alguns usuários(por enquanto alguns, logo todos) do AdSense, não apenas apontar para Firefox ou serviços do Google como também começa a ser liberado para apontar para outros publicantes do Adsense, o cliente vai poder fazer sua publicidade vinculada a uma ação no seu site, por exemplo, um site de calçado monta o anúncio no AdSense, porém o pagamento não será vinculado apenas ao clique, mas sim a algo definido pelo anunciante, pode ser um cadastro na sua newsletter, pode ser a compra de algum produto, pode ser o acesso a determinada página, enfim, mais garantia para os publicantes, assim como uma ação bem executada tem mais valor para quem publica os anúncios no seu site, logo ele também receberá mais retorno, pois os anúncios darão mais retorno.

Conheça a página do Google AdSense clicando no banner no menu a direita, cadastre-se, gratuito, rápido, fácil e você ainda pode ganhar com isso.

O novo Google Docs & Spreadsheets foi lançado, somente hoje pude testar a nova versão.

Eu cheguei a usá-lo por algum tempo e o considerava razoável, porém devo dizer que melhoram sensivelmente o serviço.

Está mais fácil, prático e rápido de usá-lo, a interface como de praxe é limpa, simples e bastante funcional.
Notei que os ícones foram mudados, deixando a interface muito mais agradável.

Agora pode-se criar pastas, o que ajuda e muito a organizar o trabalho, além de ver de forma mais simples os usuários que trabalham com determinado arquivo, e ainda, colocaram a estrelinha do gmail ali, para marcar os arquivos em destaque ou importantes.

Sinceramente está cada vez melhor, para quem está no meio informático creio que já venha se tornando o editor meio que padrão, principalmente pela facilidade de compartilhar os arquivos, melhorando muito a produtividade.

Para o usuário comum ainda vai levar um tempo até que o serviço seja utilizado mais massivamente, afinal, sejamos sinceros, todos sabemos que a maioria dos usuários comuns utiliza de um windows não original, e o mesmo normalmente já vem com office, e não é só no Brasil não.

Então com office já instalado na máquina, e sem a necessidade de compartilhar os arquivos(muitas vezes por ignorancia), o usuário comum ainda vai levar um tempo até despertar para as coisas boas que o Google Docs & Spreadsheets oferece.

Você usa o Google Docs & Spreadsheets, já fez campanha para ele ser adotado na empresa onde trabalha?