PorticanBot

Apa yang dibacanya

Hanya halaman produk awam yang dibenarkan oleh laman web kepada robot dalam robots.txt, dalam kumpulan PorticanBot atau *, mengikut RFC 9309 dan padanan terpanjang. Daripada halaman itu, ia hanya mengambil nama, harga, ketersediaan dan dimensi produk daripada data berstruktur JSON-LD, microdata dan OpenGraph.

Apa yang tidak dilakukannya

Ia tidak log masuk, tidak mengisi borang, tidak memintas CAPTCHA atau perlindungan terhadap robot, dan tidak menjalankan JavaScript.

Berapa kerap

Ke satu laman web, ia menghantar satu permintaan pada satu masa, menunggu sekurang-kurangnya 5 saat antara permintaan, dan berjalan pada waktu malam. Ia mematuhi Crawl-delay, dan melangkau laman web yang nilainya melebihi 60 saat. Apabila menerima respons 429 atau 503, ia berhenti dan kembali kemudian.

Cara menghalangnya

Dalam fail robots.txt di laman web anda, tambahkan kumpulan untuk PorticanBot yang melarang seluruh laman:

User-agent: PorticanBot
Disallow: /

Rizab hak perlombongan teks dan data

PorticanBot mematuhi rizab hak dalam pengepala atau tag meta tdm-reservation: 1 (TDMRep), menurut § 51c akta hak cipta Slovakia dan Perkara 4 Arahan 2019/790.

Soalan tentang robot ini boleh dihantar ke info@portican.com.