百度云資源
百度云分享資源網站

網站site展現突然為0,排查解決后的seo思考

“琳瑯折購物小程序”

一、前幾天網站百度展現突然為0

前幾天本博百度展現突然為0,具體表現如下

1、百度site網址,展現為0

2、百度站長工具后臺展現為0

網站百度展現突然為0

網站百度展現突然為0

而此前本博在百度上展現日均8000多

本次展現突然為0提前具有明顯的征兆,具體表現如下:

1,site首頁突然消失:在百度搜索框輸入網址 www.jyplip.live? 顯示沒有收錄;網站分頁比如 http://www.jyplip.live/page/3 占據搜索 品牌詞 “木木資源博客”? 首頁。

博主以為的問題出在 博客分頁被大量收錄,內容重復,首頁降權,于是馬上更新了網站的robots

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /*?*
Disallow: /page
Disallow: /*/page
Disallow: /attachment/
Allow: /
Sitemap: http://www.jyplip.live/sitemap.xml
Sitemap: http://www.jyplip.live/sitemap.html

通過 Disallow: /page? ? ?Disallow: /*/page? ?禁止搜索引擎抓取分頁,博主以為這樣就可以解決首頁降權的問題(這個方法是正確的,如果你們只是因為分頁收錄首頁降權,可以用以上方法);再加上本博客流量主要來源于長尾關鍵詞,首頁排不排在第一頁,博主并沒有放在心上!

可是緊接著出現了第二個情況,博主慌了!

2.site網址,展現大幅度下降

網站site展現突然變少

網站site展現突然變少

此前網站site展現會有十幾頁,現在網站site展現突然大規模收縮

到此時,博主真的慌了,因為site展現大規模收縮,就會導致所有長尾關鍵詞排名消失,流量也會消失,比如.....下圖:

site展現消失,關鍵詞排名消失

site展現消失,關鍵詞排名消失,數據來源 5118網站

目前看來,本博客需要從頭開始了,萬惡的 IDC?

 

二、原因排查:網站site突然為0,展現突然為0 原因排查

原因可能1? ?robots封禁百度spider

這個問題排查很簡單,你對robots規則熟悉就好,經排查沒任何問題,排除。

原因可能2? 本站用的是寶塔面板,寶塔防火墻屏蔽百度spider

為此,博主查閱了網站半個月的網站日志,看不懂的直接打開日志 搜索 Baiduspider? 看看狀態即可,經查從 從2019.6.16開始,百度spider 爬取量迅速下降,此后幾天幾近消失!

當然上面方法并非排除寶塔面板防火墻屏蔽百度spider的方法,博主自己也知道,并沒有用寶塔防火墻,所以寶塔屏蔽 百度spider的可能排除!

原因可能3? 服務器屏蔽百度spider,或者說百度spider屏蔽了服務器IP

這個地方重點強調,你一定要學會使用百度站長工具中的“抓取診斷”。

博客連接抓取失敗

博客連接抓取失敗

這就是根本原因,網站URL抓取失敗,博主查詢了 在這臺服務器上所有的網站,經查 都是抓取失敗

博主馬上轉移了一個簡單的Dedecms 網站到另一個服務器上,驗證抓取成功

問題,很明顯,服務器屏蔽了 百度Spider 的抓取,博主咨詢IDC提供商,提供商拒不承認服務器的問題,博主拿出大量證據,指向服務器,最終他承認了:

服務器機房開的是高防御,本博處于急速發展時期,百度spider抓取頻繁,被服務器防火墻誤認為Ddos攻擊,屏蔽了!

.......what's? the? fuc.....

 

教訓總結:

1,一定要選擇一個靠譜的IDC提供商,自己可以控制的服務器提供商

2、每個一個周到百度站長工具后臺提供抓取測試,未雨綢繆;如果出現問題,及時提交百度更新IP和robots 并反饋!

3、對網站出現數據異常要及時反映,提高警惕

最后:提高警惕,網站出問題,站長兩行淚.......

 

 

不過,上面說的,高防御 大家還是謹慎些好,否則服務器天天被黑客打,也是個問題,博主去部署CDN去...

 

歷史上的今天

贊(3)
未經允許不得轉載:木木資源博 » 網站site展現突然為0,排查解決后的seo思考
歡迎加入木木資源博QQ群,資源分享,技術交流,網賺思路:木木資源博客

評論 4

  • 昵稱 (必填)
  • 郵箱 (必填)
  • 網址
  1. #1

    你這也就是個人禍~

    下一秒 2個月前 (06-24) 來自天朝的朋友 QQ瀏覽器  TRT-AL00A Build/HUAWEITRT-AL00A 回復
    • 兵臨城下

      @下一秒 其實這次事件我思考了很多,百度抓取頻次過高問題;服務器安全問題...看來還得折騰折騰技術

      兵臨城下 2個月前 (06-24) 來自天朝的朋友 谷歌瀏覽器 Windows 7 回復
  2. #2

    你偷偷的告訴我一下是那個IDC,好避免入坑

    東來東往 2個月前 (06-26) 來自天朝的朋友 QQ瀏覽器 Windows 7 回復
    • 兵臨城下

      @東來東往 說實話,不是IDC平臺不靠譜,是我買了群里哥們的一個服務器,那臺服務器是高防,正好我網站那幾天百度抓取每天1600左右,服務器誤認為是DDOS攻擊,給封禁了百度Spider,本來是小事可是自己沒辦法操作解封;買服務器一定要買控制權在自己手上的,我是處于信任用的那哥們的,結果處理不及時....

      兵臨城下 2個月前 (06-26) 來自天朝的朋友 谷歌瀏覽器 Windows 7 回復
福彩网