PorticanBot
PorticanBot je robot platformy Portican. Obchody na Porticanu jím sledují ceny podobných produktů u konkurence, kterou si samy přidají v administraci.
Co čte
Jen veřejné stránky produktů, které web robotům povolí v robots.txt, ve skupině PorticanBot nebo *, podle RFC 9309 a pravidla nejdelší shody. Z nich bere jen název, cenu, dostupnost a rozměry produktu ze strukturovaných dat JSON-LD, microdata a OpenGraph.
Co nedělá
Nepřihlašuje se, nevyplňuje formuláře, neobchází CAPTCHA ani ochranu proti robotům a nespouští JavaScript.
Jak často
Na jeden web posílá vždy jen jeden požadavek, mezi požadavky čeká nejméně 5 sekund a chodí v noci. Crawl-delay respektuje, web s hodnotou nad 60 sekund vynechá. Při odpovědi 429 nebo 503 přestane a vrátí se později.
Jak ho zastavíte
Do souboru robots.txt na vašem webu přidejte skupinu pro PorticanBot se zákazem celého webu:
User-agent: PorticanBot
Disallow: /Výhrada vytěžování textů a dat
PorticanBot respektuje výhradu v hlavičce nebo v meta značce tdm-reservation: 1 (TDMRep), podle § 51c slovenského autorského zákona a čl. 4 směrnice 2019/790.
Dotazy k robotovi posílejte na info@portican.com.