Imenik članaka
Baidu Spider bilježi informacije o dijagnostičkim iznimkama: Što trebam učiniti ako utičnica neispravno čita i piše?
Pod pretpostavkom da Baidu nije uključio vaše web mjesto, prvo morate izvršiti dijagnozu paukovog indeksiranja na platformi resursa pretraživanja Baidu.
Što trebam učiniti ako Baidu alat za indeksiranje ne uspije indeksirati dijagnostičke veze?
Ako dijagnostika indeksiranja Baidu alata za indeksiranje ne uspije nekoliko puta, vatrozid je možda blokirao program indeksiranja.
Baidu platforma resursa pretraživanja > Dijagnoza indeksiranja > Informacije o iznimci indeksiranja: Pogreške čitanja i pisanja utičnica ▼
- Pogotovo kada koristite Cloudflare CDN, blokiran je prema zadanim postavkama.
- Na Internetu se kaže dodavanje IP adrese
xxx.xxx.xxx.xxx/24 - Međutim, pokušao sam bezuspješno.
Nisam blokirao Baidu pauke na poslužitelju, pa bi problem trebao biti Cloudflareov WAF!
Prijavite se na Cloudflare → Sigurnost → WAF → Pravila vatrozida → Stvori pravilo vatrozida
- Pronađite pravila WAF-a koja se odnose na alate za indeksiranje na Cloudflareu i pronađite opciju "legitimnog robota za indeksiranje" ▼
- Nakon kreiranja pravila vatrozida, pričekajte 10 minuta, a zatim zgrabite dijagnozu, i sve su uspješno uhvaćene!
Što nije u redu s neuspjehom indeksiranja karte web-lokacije Baidu alatom za indeksiranje i istekom veze?
Ako pošaljete adresu datoteke Sitemap na platformi resursa pretraživanja Baidu, doći će do problema kao što su neuspjeh indeksiranja i istek vremena veze ▼
Rješenje za neuspjeh Baidu alata za indeksiranje da dohvati kartu Sitemapa
Prijavite se na Cloudflare → Sigurnost → WAF → Pravila vatrozida → Stvorite pravila vatrozida ▼
- polje odaberite "Korisnički agent"
- operatera odaberite Sadrži
- Dodajte novi korisnički agent, kliknite zadnji "Ili"
- Vrijednost odnosno unesite sljedeći korisnički agent Baidu Spider UA:
-
Baiduspider/2.0 -
Baiduspider-image -
Baiduspider-render/2.0 -
http://www.baidu.com/search/spider.html -
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) -
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）
Nakon završetka ponovno testirajte dohvaćanje, a rezultat vraća HTTP zaglavlje 200, što pokazuje da je dohvaćanje uspješno▼
-
抓取诊断 > 抓取详情以下是百度Spider抓取结果及页面信息： -
提交网址： https://www.etufo.org/sitemap_baidu.xml -
抓取网址： https://www.etufo.org/sitemap_baidu.xml -
抓取UA： Mozilla/5.0 (compatible; Baiduspider/2.0; -
+http://www.baidu.com/search/spider.html) -
抓取时间： 2022-11-11 19:03:44 -
网站IP： 172.***.***.149 -
下载时长： 0.868秒 -
返回HTTP头：HTTP/2 200
Korisnički agenti drugih pauka i pretraživača također se mogu pretraživati na isti način.
Blog Hope Chen Weiliang ( https://www.chenweiliang.com/ ) podijelio je "Baidu Spider Crawl Failure Diagnosis Abnormal Information Što učiniti ako je utičnica za grešku čitanja i pisanja veza istekla", što vam je od pomoći.
Dobrodošli da podijelite vezu ovog članka:https://www.chenweiliang.com/cwl-29315.html