BuscaComponentesBot

O BuscaComponentesBot é o robô do buscacomponentes.com.br, um buscador que reúne preço e estoque de componentes eletrônicos de várias lojas. Quem encontra uma peça aqui é levado para a página do produto na loja, onde a compra acontece.

Como ele acessa as lojas

• Identifica-se pelo User-Agent BuscaComponentesBot/1.0 (+https://buscacomponentes.com.br/robo).
• Segue o robots.txt de cada loja, inclusive o Crawl-delay.
• Faz no máximo uma requisição a cada 1 a 2 segundos.
• Coleta uma vez por dia, de madrugada, e reaproveita ETag e Last-Modified para não baixar páginas que não mudaram.
• Guarda só título, preço, estoque, fabricante e o endereço da imagem de cada produto, com o link para a loja. Não copia descrições nem imagens.

Como bloquear

Para o robô não acessar sua loja, inclua no robots.txt:

User-agent: BuscaComponentesBot
Disallow: /

Contato

Lojistas podem pedir a remoção ou a correção de ofertas, ou propor o envio de um feed de produtos, pelo e-mail contato@buscacomponentes.com.br.