RodadaDeNegociosBot: o robô da agenda de eventos
O RodadaDeNegociosBot é o robô que monta a agenda de rodadas de negócios e o calendário de feiras deste site. Ele visita páginas públicas de organizadores de eventos e guarda só o essencial para quem quer participar.
Como ele se identifica
Toda visita traz no cabeçalho de identificação (user agent) o nome RodadaDeNegociosBot/1.0.
O que ele coleta
Só fatos curtos sobre cada evento:
- o nome do evento;
- as datas;
- a cidade e o local;
- quem organiza;
- o link da página oficial.
Nenhuma descrição é copiada e nenhum dado pessoal é coletado. Cada evento na agenda leva ao site oficial, que continua sendo a fonte de tudo o mais.
Com que frequência
Uma coleta por semana em cada fonte. Ele espera cerca de dez segundos entre um pedido e outro ao mesmo site e não abre navegador, para não pesar no servidor de ninguém. Se o robots.txt pedir um intervalo maior, ele obedece, até um minuto. Em cada coleta ele abre no máximo seis páginas de eventos do mesmo site, para ler a data e o local de cada um. A cada duas semanas, confere se o link oficial de cada evento publicado continua no ar. Se um site falhar cinco vezes seguidas, o robô para de visitá-lo por trinta dias. Uma vez por semana, ele procura novos sites de organizadores a partir dos links oficiais dos eventos já publicados: no máximo oito sites por semana, e seis páginas de cada um. Um site novo só tem eventos publicados depois de duas coletas consistentes.
Ele respeita o robots.txt
Antes de visitar um site, o robô lê o robots.txt dele e obedece. Para bloquear o robô no site inteiro, basta acrescentar:
User-agent: RodadaDeNegociosBot
Disallow: /Correção ou retirada
Organiza um evento que está na agenda com algum dado errado, ou prefere que ele não apareça? Fale com a gente pelo contato com o nome do evento e o link oficial, e diga o que corrigir ou se quer a retirada.