Anyè Atik
Baidu Spider kaptire enfòmasyon eksepsyon dyagnostik: Kisa mwen ta dwe fè si priz la li ak ekri mal?
Si nou sipoze ke sit entènèt ou a pa te enkli pa Baidu, ou dwe premye fè dyagnostik Spider rale sou platfòm la resous rechèch Baidu.
Kisa mwen ta dwe fè si krole Baidu pa rale lyen dyagnostik yo?
Si dyagnostik krole Baidu a echwe plizyè fwa, firewall la ka bloke pwogram krole a.
Platfòm Resous rechèch Baidu > Dyagnostik rale > Enfòmasyon sou eksepsyon rale: Socket lekti ak ekri erè ▼
- Espesyalman lè w ap itilize Cloudflare CDN, li bloke pa default.
- Sou entènèt la, yo di yo ajoute adrès IP la
xxx.xxx.xxx.xxx/24 - Sepandan, te eseye sa san rezilta si yo.
Mwen pa t 'bloke areye Baidu sou sèvè a, kidonk pwoblèm nan ta dwe WAF Cloudflare a!
Konekte nan Cloudflare → Sekirite → WAF → Règ firewall → Kreye Règ firewall
- Jwenn règ WAF ki gen rapò ak crawlers sou Cloudflare, epi jwenn opsyon "lejitim robot crawler" ▼
- Apre ou fin kreye règ firewall yo, rete tann pou 10 minit, ak Lè sa a, gen tan pwan dyagnostik la, ak tout nan yo te byen kaptire!
Ki sa ki mal ak echèk rale Sitemap nan krole Baidu ak delè koneksyon?
Si ou soumèt adrès fichye Sitemap la sou platfòm resous rechèch Baidu a, pral gen pwoblèm tankou echèk rale ak tan koneksyon ▼
Solisyon nan echèk nan krole Baidu pou pwan kat Sitemap la
Konekte nan Cloudflare → Sekirite → WAF → Règ firewall → Kreye Règ firewall ▼
- jaden, chwazi "Ajan itilizatè"
- operatè, chwazi Gen ladann
- Ajoute yon nouvo ajan itilizatè, klike sou dènye "Oswa"
- Valè, respektivman antre ajan itilizatè Baidu Spider UA sa a:
-
Baiduspider/2.0 -
Baiduspider-image -
Baiduspider-render/2.0 -
http://www.baidu.com/search/spider.html -
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) -
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）
Apre fini an, teste chache a ankò, epi rezilta a retounen HTTP header 200, ki endike ke chache a reyisi▼
-
抓取诊断 > 抓取详情以下是百度Spider抓取结果及页面信息： -
提交网址： https://www.etufo.org/sitemap_baidu.xml -
抓取网址： https://www.etufo.org/sitemap_baidu.xml -
抓取UA： Mozilla/5.0 (compatible; Baiduspider/2.0; -
+http://www.baidu.com/search/spider.html) -
抓取时间： 2022-11-11 19:03:44 -
网站IP： 172.***.***.149 -
下载时长： 0.868秒 -
返回HTTP头：HTTP/2 200
Ajan itilizatè yo nan lòt areye ak krole yo ka chèche tèt yo tou nan menm fason an.
Hope Chen Weiliang Blog ( https://www.chenweiliang.com/ ) pataje "Baidu Spider Crawl Echèk dyagnostik Enfòmasyon nòmal Kisa pou w fè si Socket Read and Write Erè Koneksyon Timed Out", ki itil ou.
Byenvini pataje lyen atik sa a:https://www.chenweiliang.com/cwl-29315.html
Byenveni nan chanèl Telegram blog Chen Weiliang a pou jwenn dènye mizajou yo!
📚 Gid sa a gen anpil valè, 🌟Sa a se yon opòtinite ki ra, pa rate li! ⏰⌛💨
Pataje epi like siw renmen!
Pataje w ak renmen ou se motivasyon kontinyèl nou!