אַרטיקל וועגווייַזער
Baidu Spider קראָלז און דיאַגנאָסיז אַבנאָרמאַל אינפֿאָרמאַציע: וואָס זאָל איך טאָן אויב די כאָלעל איז לייענען אָדער געשריבן?
אַסומינג אַז דיין וועבזייטל איז נישט ינדעקסט דורך Baidu, איר מוזן ערשטער דורכפירן אַ שפּין קראָלינג דיאַגנאָסיס אויף די Baidu זוכן מיטל פּלאַטפאָרמע.
וואָס זאָל איך טאָן אויב די Baidu קריכער פיילז צו קריכן די דיאַגנאָסטיק לינק?
אויב Baidu קריכער פיילז צו קריכן און דיאַגנאָזירן עטלעכע מאָל, די פיירוואַל קען האָבן אפגעשטעלט די קריכער.
באַידו זוכן מיטל פּלאַטפאָרם > קריכן דיאַגנאָסיס > קריכן אַבנאָרמאַל אינפֿאָרמאַציע: כאָלעל לייענען / שרייַבן טעות ▼
- ספּעציעל ווען ניצן Cloudflare CDN, וואָס איז אפגעשטעלט דורך פעליקייַט.
- אויף דער אינטערנעץ רעדט מען פון לייגן אן IP אדרעס
xxx.xxx.xxx.xxx/24 - אָבער, געפרוווט צו קיין העלפן.
איך בין נישט בלאַקינג באַידו ספּיידערז אויף די סערווער, אַזוי די פּראָבלעם זאָל זיין Cloudflare's WAF!
קלאָץ אין צו קלאָודפלאַרע → זיכערהייַט → WAF → פירעוואַלל רולעס → שאַפֿן פירעוואַלל הערשן
- איר זוכט פֿאַר קריכער-פֿאַרבונדענע WAF כּללים אויף קלאָודפלאַרע און געפֿונען די "לעגאַל ראָבאָט קראַוולער" אָפּציע ▼
- נאָך קריייטינג די פירעוואַלל כּללים, וואַרטן פֿאַר 10 מינוט, און דעמאָלט כאַפּן די דיאַגנאָסיס, און אַלע פון זיי זענען הצלחה גראַבד!
באַידו קריכער סיטעמאַפּ ניט אַנדערש צו קריכן, קשר טיימד אויס?
אויב די סיטעמאַפּ טעקע אַדרעס איז דערלאנגט אויף די באַידו זוכן מיטל פּלאַטפאָרמע, עס וועט זיין פּראָבלעמס פון קראָלינג דורכפאַל און קשר טיימאַוט ▼
באַידו קריכער ניט אַנדערש צו קריכן סיטעמאַפּ מאַפּע לייזונג
קלאָץ אין צו קלאָודפלאַרע → זיכערהייַט → WAF → פירעוואַלל כּללים → שאַפֿן פירעוואַלל כּללים ▼
- פעלד, אויסקלייַבן באַניצער-אַגענט
- אָפּעראַטאָר, אויסקלייַבן "אינהאַלט"
- לייג אַ נייַע באַניצער אַגענט, גיט "אָדער" אין די סוף
- ווערט, אַרייַן די פאלגענדע Baidu Spider UA באַניצער אַגענט ריספּעקטיוולי:
-
Baiduspider/2.0 -
Baiduspider-image -
Baiduspider-render/2.0 -
http://www.baidu.com/search/spider.html -
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html) -
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）
נאָך קאַמפּלישאַן, פּרובירן און ברענגען ווידער, און דער רעזולטאַט קערט הטטפּ כעדער 200, וואָס ינדיקייץ אַז די ברענגען איז געראָטן▼
-
抓取诊断 > 抓取详情以下是百度Spider抓取结果及页面信息： -
提交网址： https://www.etufo.org/sitemap_baidu.xml -
抓取网址： https://www.etufo.org/sitemap_baidu.xml -
抓取UA： Mozilla/5.0 (compatible; Baiduspider/2.0; -
+http://www.baidu.com/search/spider.html) -
抓取时间： 2022-11-11 19:03:44 -
网站IP： 172.***.***.149 -
下载时长： 0.868秒 -
返回HTTP头：HTTP/2 200
באַניצער אגענטן פון אנדערע ספּיידערז און קראַוולערז קענען אויך זוכן פֿאַר זיך אין די זעלבע וועג.
Hope Chen Weiliang בלאָג ( https://www.chenweiliang.com/ ) שערד "באַידו שפּין קראָלינג דורכפאַל צו דיאַגנאָזירן אַבנאָרמאַל אינפֿאָרמאַציע כאָלעל לייענען און שרייַבן ערראָרס וואָס צו טאָן וועגן קשר טיימאַוט", וואָס איז נוציק פֿאַר איר.
ברוכים הבאים צו טיילן דעם לינק פון דעם אַרטיקל:https://www.chenweiliang.com/cwl-29315.html
ברוכים הבאים צו די טעלעגראַם קאַנאַל פון Chen Weiliang ס בלאָג צו באַקומען די לעצטע דערהייַנטיקונגען!
📚 דער פירער כּולל ריזיק ווערט, 🌟 דאָס איז אַ זעלטן געלעגנהייט, טאָן ניט פעלן עס! ⏰⌛💨
ייַנטיילן און ווי אויב איר ווילט!
דיין ייַנטיילונג און לייקס זענען אונדזער קעסיידערדיק מאָוטאַוויישאַן!