亚洲色图欧美日韩在线播放-户外操美女逼逼中国-免费久久99国产精品自在现-欧美激情五月综合啪啪-九九日本黄色精品视频-亚洲成年网址青青草原-欧美性爱精品在线免费观看-国产精品一区二区美女-日电影一区二区三区

網站流量超標排查


網站出現(xiàn)流量超標時分析及解決思路為:

查看網站訪問統(tǒng)計---->結合訪問統(tǒng)計分析網站訪問日志---->確定原因采取相應措施。  


網站流量異常增大的主要原因可能有:

  1. 被搜索引擎或AI機器人頻繁抓取。對策:屏蔽惡意蜘蛛 或 流量清洗

  2. 圖片或視頻文件被第三方網站或搜索引擎引用,導致的訪問量超大。對策:開啟防盜鏈

  3. 因網站自身的訪問量變大導致的流量增長,比如有宣傳推廣或公眾號文章引用了網站的圖片等情況。對策:升級主機型號 或單獨充值流量

  4. 被PCDN刷流量... 對策:流量清洗

  5. >被灰產入侵,掛了灰產的文件在子目錄下,引來了不必要的訪問流量。對策:人工清理,程序升級打補丁等。


請根據自身網站的情況,結合以上可能原因及“訪問統(tǒng)計”、“WWW日志”提供的數據參考,自行分析原因并采取相應的對策。

如果需要我司工程師幫助分析具體原因,請提交工單申請,視情況收費100~200元/站點。海量的日志分析比較耗時,不同的網站的情況各有不同,

比如搜索引擎的抓取有些用戶是必要的,有些用戶覺得無所謂,流量太高就可以攔截,有的則認為不能攔截。所以沒有固定的現(xiàn)成的答案。


注:流量問題都是針對具體不同的網站來的,個別用戶會質疑會不會是服務器或機房的問題導致了流量異常,答案是否定的。

最近一段時間以來,確實出現(xiàn)了一些新的情況,比如AI機器人的頻繁訪問,這是以前沒有的,所以以前流量很小的網站現(xiàn)在突然流量比較大,



一.查看網站訪問統(tǒng)計

 1. 登錄到虛擬主機管理面板,點擊“訪問統(tǒng)計”

圖片.png

 2.首先查看訪問統(tǒng)計中瀏覽器與非瀏覽器流量確定流量類型。

      圖片.png

 3.根據流量類型詳細查看訪問統(tǒng)計數據:

          3.1如是瀏覽器流量占用高,可查看

      圖片.png

      圖片.png

     圖片.png

    圖片.png

  

等統(tǒng)計數據,以確定網站中是哪類文件,哪些url地址被大量訪問,以及是哪些IP,哪些蜘蛛等訪問量大。



       3.2如是非瀏覽器流量占用高,可查看


    圖片.png

  確定是什么狀態(tài)情況下產生的非瀏覽器流量。


二.分析網站訪問日志

  根據網站訪問統(tǒng)計中按按日期統(tǒng)計”數據找一天流量較大的日志下載至本地使用記事本編輯器打開對日志具體分析核實。


  圖片.png

   通常只需找最近三天左右的日志即可,

           windows主機可以點擊“www日志”下載訪問日志到wwwroot目錄下,再通過ftp方式連接下載 至本地使用編輯器打開查看。

           Linux主機通過ftp連接主機打開logs目錄下即可下載最近的日志。

   如要下載歷史日志,可以點擊www日志”--獲取歷史日志”。


三.處理措施

3.1 正常訪問情況主機流量配置低導致超標。如占用流量的文件類別、url網址、搜索蜘蛛、訪問IP等數據都較均衡,無明顯差異等。請升級主機至流量配額更大的型號。

3.2 網站頁面數據過大導致流量超標。如首頁中加載的圖片過大,同時圖片設計過大等,可聯(lián)系網站程序方人員減少頁面的圖片數,減小圖片大小等方式處理或者升級主機至流量更大的型號。

3.3 某類文件被大量請求下載等導致超標。如網站的mp4文件被外部盜鏈/下載等,可考慮將文件存放至其他第三方網站進行引用,或升級主機至不限流量的云服務器。

3.4 其他某搜索引擎蜘蛛、IP、useragent等導致流量超標異常的?赏ㄟ^web.config.htaccess進行攔截屏蔽。

屏蔽攔截搜索引擎蜘蛛、useragent的訪問抓取等:http://faq.myhostadmin.net/faq/list.asp?unid=662

屏蔽限制ip訪問http://faq.myhostadmin.net/faq/list.asp?unid=681    

   3.5 平時流量很小,突然一兩天來了非常大的流量:是否有做活動,是否有發(fā)文章轉載到公眾號被大量轉發(fā)等事件。

      如果沒有,則可能是有機器人或采集器等異常訪問流量,使用虛擬主機控制面板中的“請求限制”功能:可以禁止境外訪問,或拒絕某些IP段的訪問,也可以限制單個IP同時訪問的數量等。

   也可以配置防盜鏈措施: http://faq.myhostadmin.net/faq/list.asp?unid=628 避免自己網站的圖片,mp3視頻等資源被其他網站引用導致的異常流量過高。

   (注意:采用防盜鏈措施的情況下,直接發(fā)網站圖片等鏈接給用戶,用戶是無法訪問的,只有正常訪問網站才能顯示相關圖片,以達到防盜鏈的目的)

3.6分析到某客戶端UA訪問請求異常,可通過web.config或.htaccess規(guī)則文件屏蔽User_Agent(UA)訪問:http://faq.myhostadmin.net/faq/list.asp?unid=2595

 3.7 推薦購買異常流量清洗服務 ,我司系統(tǒng)可智能屏蔽惡意流量。

四.相關案例

4.1 正常訪問情況主機流量配置低

  圖片.png

  圖片.png 

    圖片.png

  從訪問統(tǒng)計可見占用流量的文件類別主要為phpjs、pngcss。訪問最多的網址為首頁。而訪問IP,搜索蜘蛛等占量無異常。

  通過下載網站日志核實,日志中也均正常的訪問記錄無明顯異常請求。

  此情況則為正常訪問而主機流量不足導致超標,應升級主機。

4.2 網站頁面數據過大

    圖片.png

    圖片.png

    圖片.png

    圖片.png

    從統(tǒng)計可見占用流量最多的是圖片類文件,訪問網址最多的是首頁。

  從訪問日志中可見,請求的圖片量較大,通過瀏覽器可見圖片也相對偏大。

  此情況可考慮優(yōu)化減小圖片大小通常圖片大小不應超過300KB,或升級主機。

4.3 非瀏覽器流量大某文件被下載

    圖片.png

    圖片.png    

    圖片.png

  從訪問統(tǒng)計可見非瀏覽器206狀態(tài)占用大量流量,文件類別為mp4且文件較大。 206是斷點續(xù)傳下載,由此可判斷mp4文件被下載導致。

  此情況可考慮將文件存放至其他第三方網站進行引用,或升級主機至不限流量的云服務器。


4.3 搜索引擎蜘蛛/機器人等占用流量

    圖片.png


    圖片.png

  從訪問統(tǒng)計可見Googlebotgoogle蜘蛛占用大量流量。

  從訪問日志可見Googlebot對網站某個地址進行大量的訪問抓取,通過反查IP是真實的google蜘蛛。

  此情況如不考慮seo優(yōu)化影響情況下,可以通過規(guī)則對googlebot進行屏蔽。 類似情況還可能有Baiduspider百度蜘蛛對網站的大量訪問抓取?赏ㄟ^來源IP核查是否為真實的百度蜘蛛等。屏蔽蜘蛛的抓取會對網站的seo優(yōu)化產生影響,所以并不推薦將googlebaidu的蜘蛛進行屏蔽。建議用戶可考慮升級主機解決。


五.驗證屏蔽規(guī)則是否生效

5.1 屏蔽IP驗證:

  5.1.1訪問http://ip.tool.chinaz.com/獲取到本地公網IP。

  5.1.2.htaccesslinux主機)或web.cofnig (windows主機) 中規(guī)則攔截IP換成本地公網IP

   圖片.png

 5.1.3再次訪問網站,如提示Forbidden訪問受限則規(guī)則正確生效,然后將IP對應更換為需要屏蔽的IP即可。


5.2 屏蔽蜘蛛或useragent驗證(以百度蜘蛛為例)

5.2.1 訪問http://faq.myhostadmin.net/faq/listagent.asp?Unid=2289 安裝瀏覽器插件。

         5.2.1 .htaccesslinux主機)或web.cofnig (windows主機) 中規(guī)則中增加對Baiduspider的攔截

   圖片.png

     圖片.png

  

5.2.3再次訪問網站,如提示Forbidden訪問受限則規(guī)則正確生效,然后在規(guī)則文件中取消對Baiduspider的屏蔽,改為其他蜘蛛或useragent即可。



相關產品: 異常流量清洗服務產品介紹


編輯:三五互聯(lián)
日期:2021-11-17

收藏 】 【 打印 】   
您可對文檔進行評分喲~

勾選遇到的問題提交給我們,收到反饋后保證及時修正更新!

提交反饋需要先登陸會員帳號

上一篇:網站反詐核驗流程
下一篇:已經沒有了。
若文檔內容對您沒有幫助,不能解決問題? 您還可以 咨詢在線客服提交工單搜索常見問題 ,我們將竭誠為您服務。
  >> 相關文章
 
分享至: