欧美噜噜久久久xxx-欧美乱大交xxxxx潮喷-欧美乱大交xxxxx潮喷l头像-欧美乱大交xxxxx疯狂俱乐部-欧美乱妇高清无乱码-欧美乱妇高清无乱码免费

北京做網站公司如何保證網站被正常抓取

北京網站建設公司為您提供專業、高端的一站式服務

北京做網站公司如何保證網站被正常抓取


北京網站建設公司杰誠信達提供北京做網站、北京百度優化服務

有不少網站出現過誤封Baiduspider的行為,對網站的收錄造成影響。甚至有網站反映百度蜘蛛行為異常光顧過于頻繁。近期百度站長平臺表示Baiduspider對該站點的抓取并無異常,并發布教程幫助站長識別Baiduspider,并加入白名單。

  上周百度站長平臺接到某站長求助,表示誤封禁了Baiduspider的IP,詢問是否有辦法獲得Baiduspider的所有IP,打算放入白名單加以保護,防止再次誤封。在此要告訴北京做網站公司,Baiduspider的IP池是不斷變動的,我們無法提供IP全集。

  除此之外,之前還有站長發來質疑說Baiduspider光顧過于頻繁,已超越服務器承受能力。而百度站長平臺追查發現,Baiduspider對該站點的抓取并無異常,那只spider極有可能是個李鬼。

  那么,站長該如何通過IP來判斷此spider是不是來自百度搜索引擎的呢?

  可以通過DNS反查方式來解決這個問題。根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:

  1,在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或*.baidu.jp 即為冒充。

 

  2,在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

  3,在mac os平臺下,您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或*.baidu.jp 即為冒充。


本文由北京網站建設公司杰誠信達(www.zmndesign.com.cn)提供技術支持


北京做網站公司推薦
杰誠信達
多一份選擇,總有收獲。

聯系我們建站,免費獲得專屬《做網站方案》及報價。

咨詢相關問題或預約面談,可以通過以下方式與我們聯系。

010-59814526