AWS EC2 伺服器下線警告
08-24
AWS EC2 伺服器下線警告
來自專欄 Tech 科技1 人贊了文章
這兩天服務商Pingdom 發出網站下線警告,查看一下發覺有巨大的查詢訪問進來
發現百度的蜘蛛一直再抓取網站的圖片和內容,同時間達到一個很高的峰值
看出來CPU峰值偏高,直接癱瘓伺服器!
原因是百度蜘蛛一直再請求抓取網站的圖片,更因為這個網站升級到Magento2.0, 原來的圖片路徑已經更改,但百度圖片蜘蛛應該是保留了舊網站的數據,所以一直請求錯誤的路徑。
只能無奈的用robots文件disable百度蜘蛛的抓取,反正這個是外貿網站,百度不收錄都沒有問題。
再加上防火牆的設定,一口氣把幾個蜘蛛屏蔽
搞了這麼多終於鬆一口氣了吧?
還沒有啊!不知道哪裡來的訪問打開很多httpd進程,是不是DDOS攻擊?沒法確定,AWS已經有AWS Shield的保護,暫時處理辦法是把埠都保護好
把所有高防護的設定都做了,上次伺服器的Uptime是14天,這次看看調整之後能不能持續更長時間!
推薦閱讀:
※關於「阿里雲故障」,互聯網社會是否靠譜?
※阿里雲李津:自主可控的雲才能走得更遠
※祝賀【海豚大數據實驗室】成功中標阿里雲人工智慧課程!
※阿里雲全球數據中心擴張版圖全析
※支持物聯網設備快速上雲,阿里宣布AliOS Things正式開源!
TAG:伺服器 | AmazonWebServicesAWS | 阿里雲 |