Baidu ஸ்பைடர் க்ரோலிங் தோல்வி கண்டறிதல் அசாதாரண தகவல் சாக்கெட் படிக்கவும் எழுதவும் பிழை இணைப்பு நேரம் முடிந்தது என்ன செய்ய வேண்டும்

Baidu Spider அசாதாரணமான தகவலை வலம் வந்து கண்டறியும்: சாக்கெட் படிக்கப்பட்டாலோ அல்லது எழுதப்பட்டாலோ நான் என்ன செய்ய வேண்டும்?

உங்கள் இணையதளம் Baidu ஆல் அட்டவணைப்படுத்தப்படவில்லை என்று வைத்துக் கொண்டால், முதலில் Baidu தேடல் ஆதார தளத்தில் சிலந்தி ஊர்ந்து செல்வதைக் கண்டறிய வேண்டும்.

Baidu crawler கண்டறியும் இணைப்பை வலைவலம் செய்யத் தவறினால் நான் என்ன செய்ய வேண்டும்?

Baidu crawler பலமுறை வலம் வந்து கண்டறியத் தவறினால், ஃபயர்வால் கிராலரைத் தடுத்திருக்கலாம்.

பைடு தேடல் வள தளம் > கிராலிங் கண்டறிதல் > கிராலிங் பிழை தகவல்: சாக்கெட் படித்தல்/எழுதுதல் பிழை ▼

பைடு ஸ்பைடர் க்ராலிங் தோல்வி கண்டறிதல் விதிவிலக்கு தகவல் சாக்கெட்டைப் படிக்கவும் எழுதவும் பிழைகள் இணைப்பு நேரம் முடிந்தது

  • குறிப்பாக பயன்படுத்திCloudFlare CDN-ஐப் பயன்படுத்தும்போது, ​​அது இயல்பாகவே தடுக்கப்படுகிறது.
  • இணையத்தில், ஐபி முகவரியைச் சேர்ப்பது பற்றி பேசப்படுகிறது xxx.xxx.xxx.xxx/24
  • எனினும், முயற்சி பலனளிக்கவில்லை.

நான் சேவையகத்தில் Baidu ஸ்பைடர்களைத் தடுக்கவில்லை, எனவே பிரச்சனை கிளவுட்ஃப்ளேரின் WAF ஆக இருக்க வேண்டும்!

கிளவுட்ஃப்ளேரில் உள்நுழைக → பாதுகாப்பு → WAF → ஃபயர்வால் விதிகள் → ஃபயர்வால் விதியை உருவாக்கவும்

  • கிளவுட்ஃப்ளேரில் கிராலர் தொடர்பான WAF விதிகளைத் தேடுகிறது மற்றும் "சட்டபூர்வமான ரோபோ கிராலர்" விருப்பத்தைக் கண்டறிந்தது ▼

Cloudflare-இல் உள்நுழையவும் → பாதுகாப்பு → WAF → ஃபயர்வால் விதிகள் → ஃபயர்வால் விதியை உருவாக்கவும். Cloudflare-இல் வெப் கிராலர்கள் தொடர்பான WAF விதிகளைத் தேடியபோது, ​​"சட்டப்பூர்வமான வெப் கிராலர்" என்ற விருப்பத்தைக் கண்டேன்.

    • ஃபயர்வால் விதிகளை உருவாக்கிய பிறகு, 10 நிமிடங்கள் காத்திருக்கவும், பின்னர் நோயறிதலைப் பிடிக்கவும், அவை அனைத்தும் வெற்றிகரமாக கைப்பற்றப்பட்டன!

Baidu crawler தளவரைபடம் வலைவலம் செய்ய முடியவில்லை, இணைப்பு நேரம் முடிந்ததா?

தளவரைபட கோப்பு முகவரி Baidu தேடல் ஆதார தளத்தில் சமர்ப்பிக்கப்பட்டால், வலைவலம் தோல்வி மற்றும் இணைப்பு நேரம் முடிவடைதல் போன்ற சிக்கல்கள் ஏற்படும் ▼

Baidu crawler தளவரைபடம் வலைவலம் செய்ய முடியவில்லை, இணைப்பு நேரம் முடிந்ததா?

தளவரைபட வரைபட தீர்வை வலைவலம் செய்வதில் Baidu crawler தோல்வியடைந்தது

Cloudflare → Security → WAF → Firewall Rules → Firewall விதிகளை உருவாக்கு ▼ இல் உள்நுழைக

பைடு ஸ்பைடர் கிராலிங் செயலிழப்பு கண்டறிதல் பிழை சாக்கெட் படித்தல்/எழுதுதல் பிழை இணைப்பு காலாவதி: என்ன செய்வது? - சென் வெய்லியாங் வலைப்பதிவு_நெட்வொர்க் சந்தைப்படுத்தல் திட்டமிடல்_எல்லை தாண்டிய மின்வணிக செயல்பாடு இணையதள விளம்பர பயிற்சி

  1. புலத்தில், பயனர் முகவரைத் தேர்ந்தெடுக்கவும்
  2. ஆபரேட்டர், "கொண்டுள்ளது" என்பதைத் தேர்ந்தெடுக்கவும்
  3. புதிய பயனர் முகவரைச் சேர்த்து, இறுதியில் "அல்லது" என்பதைக் கிளிக் செய்யவும்
  4. மதிப்பு, பின்வரும் Baidu Spider UA பயனர் முகவரை முறையே உள்ளிடவும்:
    • Baiduspider/2.0
    • Baiduspider-image
    • Baiduspider-render/2.0
    • http://www.baidu.com/search/spider.html
    • Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
    • Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

    முடிந்ததும், மீண்டும் சோதித்து எடுக்கவும், அதன் முடிவு HTTP தலைப்பு 200ஐத் தருகிறது, இது பெறுதல் வெற்றிகரமாக இருப்பதைக் குறிக்கிறது▼

    • 抓取诊断 > 抓取详情
      以下是百度Spider抓取结果及页面信息:
    • 提交网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取网址: https://www.etufo.org/sitemap_baidu.xml
    • 抓取UA: Mozilla/5.0 (compatible; Baiduspider/2.0;
    • +http://www.baidu.com/search/spider.html)
    • 抓取时间: 2022-11-11 19:03:44
    • 网站IP: 172.***.***.149
    • 下载时长: 0.868秒
    • 返回HTTP头:HTTP/2 200

    மற்ற சிலந்திகள் மற்றும் கிராலர்களின் பயனர் முகவர்களும் அதே வழியில் தங்களைத் தேடலாம்.

    சென் வெய்லியாங்கின் வலைப்பதிவில் ( https://www.chenweiliang.com/ ) பகிரப்பட்ட "சாக்கெட் படித்தல்/எழுதுதல் பிழைகள் மற்றும் இணைப்பு காலாவதியாவதை எவ்வாறு கையாள்வது" என்ற கட்டுரை உங்களுக்குப் பயனுள்ளதாக இருக்கும் என்று நம்புகிறோம்.

    இந்தக் கட்டுரையின் இணைப்பைத் தாராளமாகப் பகிரவும்: https://www.chenweiliang.com/cwl-29315.html

    மேலும் மறைக்கப்பட்ட தந்திரங்களைத் திறக்க🔑, எங்கள் டெலிகிராம் சேனலில் சேர வரவேற்கிறோம்!

    பிடித்திருந்தால் லைக் செய்து பகிருங்கள்! உங்களின் ஷேர்களும் லைக்குகளும் எங்களின் தொடர் உந்துதலாகும்!

     

    发表 评论

    您的邮箱地址不会被公开。必填项已用*标注

    டாப் உருட்டு