Директорияи мақолаҳо
Baidu Spider маълумоти истиснои ташхисро сабт мекунад: Чӣ бояд кард, агар розетка нодуруст хонад ва нависад?
Фарз мекунем, ки вебсайти шумо аз ҷониби Baidu дохил карда нашудааст, шумо бояд аввал дар платформаи захираҳои ҷустуҷӯии Baidu ташхиси анкабутро анҷом диҳед.
Чӣ бояд кард, агар crawler Baidu истинодҳои ташхисиро паймоиш накунад?
Агар ташхиси ҷустуҷӯии Baidu якчанд маротиба ноком шавад, брандмауэр метавонад барномаи краулерро баста бошад.
Платформаи захираҳои ҷустуҷӯии Baidu > Ташхиси ҷустуҷӯ> Маълумоти истисноии ҷустуҷӯ: Хатогиҳои хондан ва навиштан ▼
- Хусусан ҳангоми истифодаи Cloudflare CDN, он бо нобаёнӣ баста мешавад.
- Дар Интернет гуфта мешавад, ки суроғаи IP илова карда шавад
xxx.xxx.xxx.xxx/24 - Бо вуҷуди ин, кӯшиш кард, ки ин натиҷа надод.
Ман тортанакҳои Baidu-ро дар сервер масдуд накардаам, бинобар ин мушкилот бояд WAF-и Cloudflare бошад!
Воридшавӣ ба Cloudflare → Амният → WAF → Қоидаҳои Сипар → Қоидаи Сипар эҷод кунед
- Дар Cloudflare қоидаҳои WAF-ро, ки ба краулерҳо марбутанд, пайдо кунед ва варианти "роботи қонунӣ" -ро пайдо кунед ▼
- Пас аз сохтани қоидаҳои брандмауэр, 10 дақиқа интизор шавед ва пас ташхисро гиред ва ҳамаи онҳо бомуваффақият сабт карда шуданд!
Нокомии кофтукови харитаи сайти Baidu crawler ва вақти пайвастшавӣ чӣ хато дорад?
Агар шумо суроғаи файли харитаи сайтро дар платформаи манбаи ҷустуҷӯии Baidu пешниҳод кунед, мушкилот ба монанди нокомии ҷустуҷӯ ва вақти пайвастшавӣ ба миён меоянд ▼
Ҳалли нокомии браузери Baidu дар гирифтани харитаи сайт
Воридшавӣ ба Cloudflare → Амният → WAF → Қоидаҳои Сипар → Эҷоди Қоидаҳои Сипар ▼
- майдон, "Агенти корбар" -ро интихоб кунед
- операторро интихоб кунед
- Агенти корбари нав илова кунед, охирин "Ё" -ро клик кунед
- Арзиш, мутаносибан агенти корбарии Baidu Spider UA-ро ворид кунед:
-
Baiduspider/2.0 -
Baiduspider-image -
Baiduspider-render/2.0 -
http://www.baidu.com/search/spider.html -
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) -
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）
Пас аз ба итмом расидани боркуниро дубора санҷед ва натиҷа сарлавҳаи HTTP 200-ро бармегардонад, ки бомуваффақият гирифтан шаҳодат медиҳад▼
-
抓取诊断 > 抓取详情以下是百度Spider抓取结果及页面信息： -
提交网址： https://www.etufo.org/sitemap_baidu.xml -
抓取网址： https://www.etufo.org/sitemap_baidu.xml -
抓取UA： Mozilla/5.0 (compatible; Baiduspider/2.0; -
+http://www.baidu.com/search/spider.html) -
抓取时间： 2022-11-11 19:03:44 -
网站IP： 172.***.***.149 -
下载时长： 0.868秒 -
返回HTTP头：HTTP/2 200
Агентҳои корбарони дигар тортанакҳо ва хазандагон низ метавонанд ба ҳамин тариқ худашонро ҷустуҷӯ кунанд.
Hope Chen Weiliang Blog ( https://www.chenweiliang.com/ ) shared "Маълумоти ғайримуқаррарии ташхиси нокомии Baidu Spider Crawl, чӣ бояд кард, агар вақти пайвастшавии хатогии хондан ва навиштани розетка тамом шавад", ки барои шумо муфид аст.
Хуш омадед ба мубодилаи истиноди ин мақола:https://www.chenweiliang.com/cwl-29315.html
Хуш омадед ба канали Telegram блоги Чен Вейлян барои гирифтани навсозиҳои охирин!
📚 Ин дастур дорои арзиши бузург аст, 🌟Ин як имконияти нодир аст, онро аз даст надиҳед! ⏰⌛💨
Агар ба шумо маъқул бошад, мубодила кунед ва лайк монед!
Мубодилаи шумо ва лайкҳои шумо ангезаи доимии мост!