Onze bot op je site

Wat de bot doet

Yaletree is een ERP voor ondernemingen. Klanten van Yaletree kunnen voor een artikel de link naar een productpagina van een concurrent ingeven, om hun eigen prijs te vergelijken. YaletreePriceBot leest 's nachts die pagina's en haalt er de publieke prijs uit.

• Hij leest alleen pagina's die een klant zelf heeft ingegeven, en volgt geen links. Hij doorzoekt dus geen volledige catalogi.
• Hij leest alleen wat publiek is: geen login, geen formulieren, geen winkelmandje.
• Hij haalt hoogstens 2 MB per pagina op en bewaart alleen de prijs, niet de pagina.

Hoe hij zich bekendmaakt

Elke vraag draagt deze user-agent:

YaletreePriceBot/1.0 (+https://yaletree.com/bot)

Hoe vaak

• Hoogstens één pagina per 5 seconden per site. Vraagt je robots.txt een langere Crawl-delay, dan volgt de bot die.
• Eén keer per nacht, en per klant standaard hoogstens 500 pagina's in totaal, verspreid over alle sites.
• Je robots.txt wordt gelezen voor elke site en 24 uur bewaard. Een wijziging geldt dus uiterlijk na een dag.

Hoe je hem weert

De bot volgt robots.txt. Om hem van je hele site te weren, zet je dit in robots.txt:

User-agent: YaletreePriceBot
Disallow: /

Wil je alleen een deel afschermen, gebruik dan Disallow met dat pad. Een regel voor User-agent: * geldt ook voor onze bot. Als de bot een pagina niet mag lezen, ziet de klant van Yaletree dat en krijgt hij geen prijs.

Contact

Komt de bot te vaak langs of heb je een vraag, mail dan naar info@yaletree.com met de naam van je site. De bot wordt beheerd door YAIS BV, met zetel te Eikblokstraat 32, 2100 Antwerpen, ondernemingsnummer 1006.558.904, RPR Antwerpen, afdeling Antwerpen.