Cyfeiriadur Erthygl
Mae Baidu Spider yn casglu gwybodaeth eithriad diagnostig: Beth ddylwn i ei wneud os yw'r soced yn darllen ac yn ysgrifennu'n anghywir?
Gan dybio nad yw eich gwefan wedi'i mynegeio gan Baidu, yn gyntaf rhaid i chi berfformio diagnosis cropian pry cop ar lwyfan adnoddau chwilio Baidu.
Beth ddylwn i ei wneud os bydd ymlusgwr Baidu yn methu â cropian cysylltiadau diagnostig?
Os bydd diagnosis cropian ymlusgo Baidu yn methu sawl gwaith, efallai y bydd y wal dân wedi rhwystro'r rhaglen ymlusgo.
Llwyfan Adnoddau Chwilio Baidu > Diagnosis Crawl > Gwybodaeth Eithriad Crawl: Gwallau darllen ac ysgrifennu soced ▼
- Yn enwedig wrth ddefnyddio Cloudflare CDN, mae'n cael ei rwystro yn ddiofyn.
- Ar y Rhyngrwyd, dywedir ei fod yn ychwanegu'r cyfeiriad IP
xxx.xxx.xxx.xxx/24 - Fodd bynnag, ceisiodd hynny yn ofer.
Wnes i ddim rhwystro pryfed cop Baidu ar y gweinydd, felly dylai'r broblem fod yn WAF Cloudflare!
Mewngofnodi i Cloudflare → Diogelwch → WAF → Firewall Rules → Create Firewall Rule
- Dewch o hyd i reolau WAF sy'n ymwneud ag ymlusgwyr ar Cloudflare, a dod o hyd i'r opsiwn o "ymlusgwr robot cyfreithlon" ▼
- Ar ôl creu'r rheolau wal dân, arhoswch am 10 munud, ac yna cydio yn y diagnosis, a chafodd pob un ohonynt eu dal yn llwyddiannus!
Beth sydd o'i le ar ymlusgwr Baidu Map o'r wefan yn cropian methiant a goramser cysylltiad?
Os cyflwynwch gyfeiriad y ffeil Map Safle ar blatfform adnoddau chwilio Baidu, bydd problemau fel methiant cropian a goramser cysylltiad ▼
Ateb i fethiant ymlusgwr Baidu i fachu map y Safle
Mewngofnodi i Cloudflare → Diogelwch → WAF → Firewall Rules → Create Firewall Rules ▼
- maes, dewiswch "Asiant Defnyddiwr"
- gweithredwr, dewiswch Contains
- Ychwanegu asiant defnyddiwr newydd, cliciwch yr olaf "Neu"
- Gwerth, yn y drefn honno nodwch yr asiant defnyddiwr Baidu Spider UA canlynol:
-
Baiduspider/2.0 -
Baiduspider-image -
Baiduspider-render/2.0 -
http://www.baidu.com/search/spider.html -
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) -
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）
Ar ôl ei gwblhau, profwch y nôl eto, ac mae'r canlyniad yn dychwelyd pennawd HTTP 200, gan nodi bod y cyrchu yn llwyddiannus ▼
-
抓取诊断 > 抓取详情以下是百度Spider抓取结果及页面信息： -
提交网址： https://www.etufo.org/sitemap_baidu.xml -
抓取网址： https://www.etufo.org/sitemap_baidu.xml -
抓取UA： Mozilla/5.0 (compatible; Baiduspider/2.0; -
+http://www.baidu.com/search/spider.html) -
抓取时间： 2022-11-11 19:03:44 -
网站IP： 172.***.***.149 -
下载时长： 0.868秒 -
返回HTTP头：HTTP/2 200
Gall asiantau defnyddwyr pryfed cop ac ymlusgwyr eraill hefyd chwilio drostynt eu hunain yn yr un modd.
Blog Chen Weiliang Gobeithio ( https://www.chenweiliang.com/ ) shared "Baidu Spider Crawl Methiant Diagnosis Annormal Gwybodaeth Beth i'w Wneud Os Soced Darllen ac Ysgrifennu Cysylltiad Gwall Wedi Amser Allan", sy'n ddefnyddiol i chi.
Croeso i chi rannu dolen yr erthygl hon:https://www.chenweiliang.com/cwl-29315.html