Baidu ಸ್ಪೈಡರ್ ಕ್ರಾಲಿಂಗ್ ವೈಫಲ್ಯದ ರೋಗನಿರ್ಣಯದ ಅಸಹಜ ಮಾಹಿತಿ ಸಾಕೆಟ್ ಓದಲು ಮತ್ತು ಬರೆಯಲು ದೋಷ ಸಂಪರ್ಕದ ಸಮಯ ಮೀರಿದೆ ಏನು ಮಾಡಬೇಕು

Baidu Spider ರೋಗನಿರ್ಣಯದ ವಿನಾಯಿತಿ ಮಾಹಿತಿಯನ್ನು ಸೆರೆಹಿಡಿಯುತ್ತದೆ: ಸಾಕೆಟ್ ತಪ್ಪಾಗಿ ಓದಿದರೆ ಮತ್ತು ಬರೆಯುತ್ತಿದ್ದರೆ ನಾನು ಏನು ಮಾಡಬೇಕು?

ನಿಮ್ಮ ವೆಬ್‌ಸೈಟ್ ಅನ್ನು Baidu ನಿಂದ ಸೇರಿಸಲಾಗಿಲ್ಲ ಎಂದು ಭಾವಿಸಿದರೆ, ನೀವು ಮೊದಲು Baidu ಹುಡುಕಾಟ ಸಂಪನ್ಮೂಲ ವೇದಿಕೆಯಲ್ಲಿ ಸ್ಪೈಡರ್ ಕ್ರಾಲಿಂಗ್ ರೋಗನಿರ್ಣಯವನ್ನು ಮಾಡಬೇಕು.

Baidu ಕ್ರಾಲರ್ ಡಯಾಗ್ನೋಸ್ಟಿಕ್ ಲಿಂಕ್‌ಗಳನ್ನು ಕ್ರಾಲ್ ಮಾಡಲು ವಿಫಲವಾದರೆ ನಾನು ಏನು ಮಾಡಬೇಕು?

Baidu ಕ್ರಾಲರ್ ಕ್ರಾಲ್ ರೋಗನಿರ್ಣಯವು ಹಲವಾರು ಬಾರಿ ವಿಫಲವಾದರೆ, ಫೈರ್‌ವಾಲ್ ಕ್ರಾಲರ್ ಪ್ರೋಗ್ರಾಂ ಅನ್ನು ನಿರ್ಬಂಧಿಸಿರಬಹುದು.

ಬೈದು ಹುಡುಕಾಟ ಸಂಪನ್ಮೂಲ ವೇದಿಕೆ > ಕ್ರಾಲಿಂಗ್ ಡಯಾಗ್ನೋಸ್ಟಿಕ್ಸ್ > ಕ್ರಾಲಿಂಗ್ ದೋಷ ಮಾಹಿತಿ: ಸಾಕೆಟ್ ಓದಲು/ಬರೆಯಲು ದೋಷ ▼

ಬೈದು ಸ್ಪೈಡರ್ ಕ್ರಾಲಿಂಗ್ ವೈಫಲ್ಯ ರೋಗನಿರ್ಣಯ ವಿನಾಯಿತಿ ಮಾಹಿತಿ ಸಾಕೆಟ್ ಅನ್ನು ಓದಲು ಮತ್ತು ಬರೆಯಲು ದೋಷಗಳ ಸಂಪರ್ಕದ ಅವಧಿ ಮೀರಿದೆ

  • ವಿಶೇಷವಾಗಿ ಬಳಸುವುದುcloudflare CDN ಬಳಸುವಾಗ, ಅದನ್ನು ಪೂರ್ವನಿಯೋಜಿತವಾಗಿ ನಿಷ್ಕ್ರಿಯಗೊಳಿಸಲಾಗುತ್ತದೆ.
  • ಇಂಟರ್ನೆಟ್ನಲ್ಲಿ, IP ವಿಳಾಸವನ್ನು ಸೇರಿಸಲು ಹೇಳಲಾಗುತ್ತದೆ xxx.xxx.xxx.xxx/24
  • ಆದರೆ, ಆ ಪ್ರಯತ್ನ ಮಾಡಿದರೂ ಪ್ರಯೋಜನವಾಗಲಿಲ್ಲ.

ನಾನು ಸರ್ವರ್‌ನಲ್ಲಿ ಬೈದು ಸ್ಪೈಡರ್‌ಗಳನ್ನು ನಿರ್ಬಂಧಿಸಿಲ್ಲ, ಆದ್ದರಿಂದ ಸಮಸ್ಯೆ ಕ್ಲೌಡ್‌ಫ್ಲೇರ್‌ನ WAF ಆಗಿರಬೇಕು!

ಕ್ಲೌಡ್‌ಫ್ಲೇರ್‌ಗೆ ಲಾಗಿನ್ ಮಾಡಿ → ಭದ್ರತೆ → WAF → ಫೈರ್‌ವಾಲ್ ನಿಯಮಗಳು → ಫೈರ್‌ವಾಲ್ ನಿಯಮವನ್ನು ರಚಿಸಿ

  • ಕ್ಲೌಡ್‌ಫ್ಲೇರ್‌ನಲ್ಲಿ ಕ್ರಾಲರ್‌ಗಳಿಗೆ ಸಂಬಂಧಿಸಿದ WAF ನಿಯಮಗಳನ್ನು ಹುಡುಕಿ ಮತ್ತು "ಕಾನೂನುಬದ್ಧ ರೋಬೋಟ್ ಕ್ರಾಲರ್" ಆಯ್ಕೆಯನ್ನು ಕಂಡುಕೊಂಡಿದೆ ▼

Cloudflare → Security → WAF → Firewall Rules → Create Firewall Rule ಗೆ ಲಾಗಿನ್ ಆಗಿ. Cloudflare ನಲ್ಲಿ ವೆಬ್ ಕ್ರಾಲರ್‌ಗಳಿಗೆ ಸಂಬಂಧಿಸಿದ WAF ನಿಯಮಗಳನ್ನು ಹುಡುಕಿದಾಗ, ನನಗೆ "Legitimate Web Crawler" ಆಯ್ಕೆ ಸಿಕ್ಕಿತು.

    • ಫೈರ್ವಾಲ್ ನಿಯಮಗಳನ್ನು ರಚಿಸಿದ ನಂತರ, 10 ನಿಮಿಷಗಳ ಕಾಲ ನಿರೀಕ್ಷಿಸಿ, ತದನಂತರ ರೋಗನಿರ್ಣಯವನ್ನು ಪಡೆದುಕೊಳ್ಳಿ, ಮತ್ತು ಅವುಗಳನ್ನು ಎಲ್ಲಾ ಯಶಸ್ವಿಯಾಗಿ ಸೆರೆಹಿಡಿಯಲಾಗಿದೆ!

Baidu ಕ್ರಾಲರ್ ಸೈಟ್‌ಮ್ಯಾಪ್ ಕ್ರಾಲಿಂಗ್ ವೈಫಲ್ಯ ಮತ್ತು ಸಂಪರ್ಕದ ಅವಧಿ ಮೀರುವುದರಲ್ಲಿ ಏನು ತಪ್ಪಾಗಿದೆ?

ನೀವು Baidu ಹುಡುಕಾಟ ಸಂಪನ್ಮೂಲ ಪ್ಲಾಟ್‌ಫಾರ್ಮ್‌ನಲ್ಲಿ ಸೈಟ್‌ಮ್ಯಾಪ್ ಫೈಲ್‌ನ ವಿಳಾಸವನ್ನು ಸಲ್ಲಿಸಿದರೆ, ಕ್ರಾಲ್ ವೈಫಲ್ಯ ಮತ್ತು ಸಂಪರ್ಕದ ಅವಧಿ ಮೀರುವಂತಹ ಸಮಸ್ಯೆಗಳಿರುತ್ತವೆ ▼

Baidu ಕ್ರಾಲರ್ ಸೈಟ್‌ಮ್ಯಾಪ್ ಕ್ರಾಲಿಂಗ್ ವೈಫಲ್ಯ ಮತ್ತು ಸಂಪರ್ಕದ ಅವಧಿ ಮೀರುವುದರಲ್ಲಿ ಏನು ತಪ್ಪಾಗಿದೆ?

ಸೈಟ್‌ಮ್ಯಾಪ್ ನಕ್ಷೆಯನ್ನು ಪಡೆದುಕೊಳ್ಳಲು Baidu ಕ್ರಾಲರ್‌ನ ವೈಫಲ್ಯಕ್ಕೆ ಪರಿಹಾರ

ಕ್ಲೌಡ್‌ಫ್ಲೇರ್‌ಗೆ ಲಾಗಿನ್ ಮಾಡಿ → ಭದ್ರತೆ → WAF → ಫೈರ್‌ವಾಲ್ ನಿಯಮಗಳು → ಫೈರ್‌ವಾಲ್ ನಿಯಮಗಳನ್ನು ರಚಿಸಿ ▼

ಬೈದು ಸ್ಪೈಡರ್ ಕ್ರಾಲಿಂಗ್ ವೈಫಲ್ಯ ರೋಗನಿರ್ಣಯ ದೋಷ ಸಾಕೆಟ್ ಓದಲು/ಬರೆಯಲು ದೋಷ ಸಂಪರ್ಕ ಸಮಯ ಮೀರಿದೆ: ಏನು ಮಾಡಬೇಕು? - ಚೆನ್ ವೀಲಿಯಾಂಗ್ ಬ್ಲಾಗ್_ನೆಟ್‌ವರ್ಕ್ ಮಾರ್ಕೆಟಿಂಗ್ ಯೋಜನೆ_ಕ್ರಾಸ್-ಬಾರ್ಡರ್ ಇ-ಕಾಮರ್ಸ್ ಕಾರ್ಯಾಚರಣೆ ವೆಬ್‌ಸೈಟ್ ಪ್ರಚಾರ ಟ್ಯುಟೋರಿಯಲ್

  1. ಕ್ಷೇತ್ರ, "ಬಳಕೆದಾರ ಏಜೆಂಟ್" ಆಯ್ಕೆಮಾಡಿ
  2. ಆಪರೇಟರ್, ಆಯ್ಕೆಮಾಡಿ ಒಳಗೊಂಡಿದೆ
  3. ಹೊಸ ಬಳಕೆದಾರ ಏಜೆಂಟ್ ಅನ್ನು ಸೇರಿಸಿ, ಕೊನೆಯ "ಅಥವಾ" ಕ್ಲಿಕ್ ಮಾಡಿ
  4. ಮೌಲ್ಯ, ಅನುಕ್ರಮವಾಗಿ ಕೆಳಗಿನ Baidu Spider UA ಬಳಕೆದಾರ ಏಜೆಂಟ್ ಅನ್ನು ನಮೂದಿಸಿ:
    • Baiduspider/2.0
    • Baiduspider-image
    • Baiduspider-render/2.0
    • http://www.baidu.com/search/spider.html
    • Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
    • Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

    ಪೂರ್ಣಗೊಂಡ ನಂತರ, ಪಡೆದುಕೊಳ್ಳುವಿಕೆಯನ್ನು ಮತ್ತೊಮ್ಮೆ ಪರೀಕ್ಷಿಸಿ, ಮತ್ತು ಫಲಿತಾಂಶವು HTTP ಹೆಡರ್ 200 ಅನ್ನು ಹಿಂತಿರುಗಿಸುತ್ತದೆ, ಇದು ಪಡೆಯುವುದು ಯಶಸ್ವಿಯಾಗಿದೆ ಎಂದು ಸೂಚಿಸುತ್ತದೆ▼

    • 抓取诊断 > 抓取详情
      以下是百度Spider抓取结果及页面信息:
    • 提交网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取UA: Mozilla/5.0 (compatible; Baiduspider/2.0;
    • +http://www.baidu.com/search/spider.html)
    • 抓取时间: 2022-11-11 19:03:44
    • 网站IP: 172.***.***.149
    • 下载时长: 0.868秒
    • 返回HTTP头:HTTP/2 200

    ಇತರ ಜೇಡಗಳು ಮತ್ತು ಕ್ರಾಲರ್‌ಗಳ ಬಳಕೆದಾರ ಏಜೆಂಟ್‌ಗಳು ಸಹ ಅದೇ ರೀತಿಯಲ್ಲಿ ತಮ್ಮನ್ನು ಹುಡುಕಬಹುದು.

    ಚೆನ್ ವೈಲಿಯಾಂಗ್ ಅವರ ಬ್ಲಾಗ್‌ನಲ್ಲಿ ( https://www.chenweiliang.com/ ) ಹಂಚಿಕೊಂಡಿರುವ "ಸಾಕೆಟ್ ಓದುವ/ಬರೆಯುವ ದೋಷಗಳು ಮತ್ತು ಸಂಪರ್ಕದ ಸಮಯ ಮೀರುವಿಕೆಗಳನ್ನು ಹೇಗೆ ಎದುರಿಸುವುದು" ಎಂಬ ಲೇಖನವು ನಿಮಗೆ ಸಹಾಯಕವಾಗಲಿದೆ ಎಂದು ಆಶಿಸುತ್ತೇವೆ.

    ಈ ಲೇಖನದ ಲಿಂಕ್ ಅನ್ನು ಹಂಚಿಕೊಳ್ಳಲು ಹಿಂಜರಿಯಬೇಡಿ: https://www.chenweiliang.com/cwl-29315.html

    ಇನ್ನಷ್ಟು ಗುಪ್ತ ತಂತ್ರಗಳನ್ನು ಅನ್‌ಲಾಕ್ ಮಾಡಲು 🔑, ನಮ್ಮ ಟೆಲಿಗ್ರಾಮ್ ಚಾನಲ್‌ಗೆ ಸೇರಲು ಸ್ವಾಗತ!

    ಇಷ್ಟವಾದಲ್ಲಿ ಶೇರ್ ಮಾಡಿ ಮತ್ತು ಲೈಕ್ ಮಾಡಿ! ನಿಮ್ಮ ಹಂಚಿಕೆಗಳು ಮತ್ತು ಇಷ್ಟಗಳು ನಮ್ಮ ನಿರಂತರ ಪ್ರೇರಣೆ!

     

    ಪ್ರತಿಕ್ರಿಯೆಗಳು

    您的邮箱地址不会被公开。必填项已用*标注

    ಟಾಪ್ ಗೆ ಸ್ಕ್ರೋಲ್