Info su BecomingVetBot
BecomingVet.com usa un piccolo crawler ben educato chiamato BecomingVetBot per trovare missioni di volontariato ed ecovolontariato utili ai futuri veterinari. Le voci aggregate vivono su /experience/.
Identificare il bot
Ogni richiesta del crawler porta questa identificazione:
User-Agent: BecomingVetBot/1.0 (+https://becomingvet.com/bot)Regole che il bot rispetta
- Rispetta il tuo
robots.txt(User-AgentBecomingVetBoto wildcard). - Rate-limit: massimo 1 richiesta ogni 1,5 s per host.
- Preleva solo pagine pubblicamente listate (mai URL privati o protetti).
- Solo un breve estratto (≤ 400 caratteri). Il contenuto completo non viene mai ripubblicato.
- Ogni voce rimanda alla tua pagina originale — il traffico e le candidature vanno a te.
- Nessuna pubblicità viene mostrata sulle pagine aggregate.
Se non vuoi essere indicizzato
1. Bloccare il crawler in robots.txt
User-agent: BecomingVetBot
Disallow: /Il bot smetterà di visitare il tuo sito alla prossima passata (entro 24 h).
2. Chiedere la rimozione di una voce
Scrivi a contact@becomingvet.com con l'URL della voce (o della pagina fonte). Rimozione entro pochi giorni, spesso lo stesso giorno.
3. Meta tag sulla pagina fonte
Aggiungi questo nel <head> di una pagina per escluderla dall'aggregato:
<meta name="BecomingVetBot" content="noindex">Contatti
Domande, richieste, segnalazioni: contact@becomingvet.com.
Ultimo aggiornamento: September 2026. Questa pagina è stabile — l'URL non cambierà.