Dijagnostika greške pri puzanju Baidu spidera abnormalne informacije greška čitanja i pisanja utičnice istek vremena što učiniti

Baidu Spider bilježi informacije o dijagnostičkom izuzetku: Šta da radim ako utičnica čita i piše pogrešno?

Pod pretpostavkom da Baidu nije uključio vašu web stranicu, prvo morate izvršiti dijagnozu puzanja pauka na Baidu platformi za pretraživanje resursa.

Šta da radim ako Baidu pretraživač ne uspije da indeksira dijagnostičke veze?

Ako Baiduova dijagnoza indeksiranja ne uspije nekoliko puta, zaštitni zid je možda blokirao program za indeksiranje.

Baidu Search Resource Platform > Dijagnostika indeksiranja > Informacije o iznimkama indeksiranja: Greške čitanja i pisanja utičnice ▼

Riješite Baidu spider pauk neuspjeh dijagnoze podataka o izuzetku informacija o greškama čitanja i pisanja utičnice

  • Naročito kada koristite Cloudflare CDN, on je blokiran prema zadanim postavkama.
  • Na internetu se kaže da se dodaje IP adresa xxx.xxx.xxx.xxx/24
  • Međutim, pokušao to bezuspješno.

Nisam blokirao Baidu paukove na serveru, tako da bi problem trebao biti Cloudflareov WAF!

Prijavite se na Cloudflare → Sigurnost → WAF → Pravila zaštitnog zida → Kreirajte pravilo zaštitnog zida

  • Pronađite pravila WAF-a koja se odnose na indeksiranje na Cloudflareu i pronađite opciju "legitimnog robotskog puzača" ▼

Šta nije u redu sa neuspehom indeksiranja mape sajta Baidu pretraživača i istekom veze?list 2

    • Nakon kreiranja pravila zaštitnog zida, pričekajte 10 minuta, a zatim zgrabite dijagnozu i sva su uspješno snimljena!

Šta nije u redu sa neuspehom indeksiranja mape sajta Baidu pretraživača i istekom veze?

Ako dostavite adresu datoteke Sitemap na Baidu platformi za pretraživanje, pojavit će se problemi kao što su neuspjeh indeksiranja i vremensko ograničenje veze ▼

Dijagnostika greške pri puzanju Baidu spidera abnormalne informacije greška čitanja i pisanja utičnice istek vremena što učiniti

Rješenje za neuspjeh Baidu pretraživača da preuzme mapu Sitemapa

Prijavite se na Cloudflare → Sigurnost → WAF → Pravila zaštitnog zida → Kreirajte pravila zaštitnog zida ▼

  1. polje, odaberite "Korisnički agent"
  2. operatera, izaberite Sadrži
  3. Dodajte novog korisničkog agenta, kliknite na posljednje "Ili"
  4. Vrijednost, odnosno unesite sljedeći Baidu Spider UA korisnički agent:
    • Baiduspider/2.0
    • Baiduspider-image
    • Baiduspider-render/2.0
    • http://www.baidu.com/search/spider.html
    • Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
    • Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

    Nakon završetka, ponovo testirajte dohvaćanje i rezultat će vratiti HTTP zaglavlje 200, što ukazuje da je dohvaćanje uspješno▼

    • 抓取诊断 > 抓取详情
      以下是百度Spider抓取结果及页面信息:
    • 提交网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取UA: Mozilla/5.0 (compatible; Baiduspider/2.0;
    • +http://www.baidu.com/search/spider.html)
    • 抓取时间: 2022-11-11 19:03:44
    • 网站IP: 172.***.***.149
    • 下载时长: 0.868秒
    • 返回HTTP头:HTTP/2 200

    Korisnički agenti drugih paukova i crawlera također mogu tražiti sami sebe na isti način.

    Komentari

    Vaša email adresa neće biti objavljena. Koriste se obavezna polja * Oznaka

    Dođite na vrh