VehiclezBot
VehiclezBot is de crawler van Vehiclez. Hij leest openbare websites van voertuigbedrijven om profielen actueel te houden: contactgegevens, diensten en openingstijden zoals het bedrijf die zelf publiceert.
Herkenning
User-agent: Mozilla/5.0 (compatible; VehiclezBot/1.0; +https://vehiclez.nl/crawler). De crawler respecteert robots.txt, haalt per website hooguit enkele pagina’s op met minimaal 2,5 seconde tussen verzoeken en laadt geen afbeeldingen, scripts of trackers.
Uitsluiten of verwijderen
Voeg toe aan robots.txt:
User-agent: VehiclezBot Disallow: /
Verwijdering van een profiel of correctie van gegevens: [contactadres volgt]. We handelen verzoeken handmatig af.
Wat we bewaren
Bedrijfsnaam, adres, website, telefoonnummer, e-mailadres, diensten, openingstijden en korte uitspraken van de website zelf, elk met bron en datum. Zie ook privacy.
Lees als Markdown