pfindBot

pfindBot ir pfind.pro — rūpnieciskās un smagās tehnikas rezerves daļu meklētājprogrammas — rāpuļprogramma. Tā lasa rezerves daļu piegādātāju produktu lapas, lai pircējs, kurš meklē detaļas numuru, atrastu piedāvājumu un iegādātos to piegādātāja vietnē.

Ko tā ielādē

Rezerves daļu piegādātāju produktu lapas, produktu plūsmas un vietnes kartes, kā arī robots.txt. Produktu attēlus ielādē pfindBot-Image, lai blakus saitei uz piegādātāju parādītu sīktēlu. pfindBot nekad neveic pasūtījumus, neaizpilda veidlapas un nepiesakās.

Kā tā darbojas

Tā ievēro robots.txt, arī Crawl-delay, un pārlasa to vismaz reizi dienā. Lapas tā pieprasa mērenā tempā un palēnina darbību, ja vietne atbild ar 429 vai 503.

Kā to atpazīt

Lietotāja aģents satur pfindBot/1.0 (+https://pfind.pro/bot) lapām un pfindBot-Image/1.0 (+https://pfind.pro/bot) attēliem.

Kā to ierobežot vai bloķēt

Pievienojiet savam robots.txt grupu aģentam pfindBot. Piemēram, lai liegtu tai piekļuvi visai vietnei:

User-agent: pfindBot
Disallow: /

Grupa aģentam pfindBot attiecas arī uz pfindBot-Image, ja vien attēlu rāpuļprogrammai nenorādāt atsevišķu grupu. Izmaiņas stājas spēkā dienas laikā.

Kontakti

Jautājumi vai problēma ar pfindBot: [email protected].