2015 年 5 月 11 日,網易骨幹網宕機是怎麼回事?

2015年5月11日20點40分左右開始,網易所有業務集體掉線,包括夢幻西遊、夢幻西遊手游、網易雲音樂、網易公開課、網易雲課堂,易信、網易新聞等。

5月12日消息,昨日晚間21時許,互聯網門戶網易突然出現大面積服務癱瘓問題,網易新聞、雲音樂、易信、有道雲筆記等多款移動應用均無法正常刷新,網易名下的遊戲也全線癱瘓,用戶長時間無法刷新和登錄。

網易的官方公告:網易公告_網易新聞中心

尊敬的網易用戶,2015年5月11日晚21點,因骨幹網路遭受攻擊,導致網易旗下部分服務暫時無法正常使用,技術人員正在搶修中,具體修復時間請關注稍後公告通知,給您帶來的不便敬請諒解。關於網易大廈著火的新聞為謠言,網易公司保留追究法律責任的權利。


我懷疑,要麼是 AS4837 內的部分設備損壞,要麼是 AS45062 的邊界路由損壞,我認為後者概率更大,因為如果是前者那出問題的就不是網易一家,而是聯通用戶集體斷網……

反正效果就是 AS45062 和 AS4837 鏈路中斷。

12 日早晨網易 AS45062 的路由全部是走 AS58461—AS4134 到電信的。

ps 我不同意 @李依隆Jimmy 的說法,網易有自己的 AS,直連電信和聯通的骨幹網,而電信和網通之間的互聯根本不會過網易(事實上國內電信-聯通互聯都不一定會過骨幹網,電信和聯通各個省級分部也有 AS ,不少省級就連上了),想讓 AS45062—AS4837 之間的鏈路過載還不如直接去 D 網易……

昨天夜裡的路由表那叫一個美啊……

11 日下午:

11 日夜,故障後:

12 日早晨,臨時恢復:

12 日晚,恢復正常:


學校用的是網易的企業郵箱,IT群里給了這樣一條非正式通知:

「杭州的bgp出故障,正在找運營商處理中」。

既然是bgp問題,那麼獲取可以通過現成工具獲取一些故障信息。

邊界網關協議 # wikipedia

自治系統 # wikipedia

中國互聯網路信息中心 # AS號分配暫行管理規定

中國互聯網路信息中心 # IP/AS常見問題及解答

ASNumbers.net 查詢 netease ,得到網易的 AS number

AS45062 Guangzhou NetEase Computer System Co., Ltd.

只有一條,具體分配原則參考上面的CNNIC,即就是說,需要與多個出口連接。

AS45062 Guangzhou NetEase Computer System Co., Ltd. 直接進 he.net 查看 AS 詳情。

Graph v4 一欄可以看到簡單結構,它的上游是 AS58461(信息是中國電信杭州IDC)和AS4837(信息是中國網通169/聯通幹線)。

主要查看「Prefixes v4」一欄,表示該AS廣播的IP v4 地址前綴,看起來一切正常。

不科學,於是換一個實時度比較高的bgp信息查詢。找到了這個:

https://www.dan.me.uk/bgplookup?asn=45062

23333。

空了。

可能問題來源:

自己bgp路由壞掉了

坑貨 AS4837 壞掉了(AS58461 佔比比較小,應該問題不大)

UPDATE: 寫回答的過程中,微博也有不少同學提到了 AS 的問題。梯子: Sina Visitor System


更新:2015.5.15 1:06

從微博上反應的情況來看,網易雲音樂又掛了。官方暫時沒有回應。

--------------------------------------------

2015.5.11

喜歡網易這種幽默。


丁磊在挖寶時不慎挖塌了網易的大廈,一群無家可歸的工作人員在馬路邊四處乞討,各路的英雄快前往平亂。。


藍翔期中考試呢,你們不要這麼緊張好不好


因為婦聯今晚就上映了,你們這群人玩不了遊戲聽不了歌也看不了新聞,就只能去看電影啦


時間:2015年5月10日晚上22點整

地點:國家安全部

某領導:小劉啊,最近那個程序員的秘密招聘進行得怎麼樣了。

小劉:報告領導,招聘工作已在10天前就展開了,目前除了部分監獄因為手續問題未能進入尋找,我們已在北京、山東、廣東、山西、河南、山東與藍翔學校等地方初步招聘到技術人員50名。

某領導:50名?這麼多,我記得我讓你找5個人就行了啊。

小劉:是的,領導,這50名只是初步定下來的人員,我們後續還有考核,最終只錄用5名。

某領導:這樣啊,那你準備怎麼考核啊。

小劉:領導您覺得應該怎麼考核呢,這些基本都是中國黑客界頂尖人才了,考核項目我覺得不能太簡單了。

某領導:恩,你說得對,要不讓他們去美國安全局逛逛?

小劉:領導,這不好吧,上次我們招人的時候在美國那邊的轟動就挺大的,雖然最後美國安全局沒查出來是誰所為,算是僥倖,但是萬一被查出來了,豈不是影響我們兩國的交情,搞不好還會引發戰爭。

某領導:。。。恩,說的也是,不能搞得那麼大了。那你說怎麼辦?

小劉:我知道目前國內幾家比較大的上市公司,上次開會我們還提到過他們,就上次王哥說的那三家巨頭,我們可以從他們下手,這樣既不會引起國際動蕩,也算是對國內的企業的考驗,您說怎麼樣?

某領導:你是指騰訊網易和百度嗎?這個。。。。

小劉:對,我覺得目前這三家公司都彼此彼此,都可以試試,看看誰的實力更強。

某領導:這個不太好吧,上周我剛跟馬總吃過飯,他還說要送我一個5位QQ號呢。

小劉:。。。。。。

某領導:李總昨天跟我從紅場回來的路上還跟我說以後要跟咱們合作,弄一個百度人臉搜索引擎。你張叔都已經同意了,他說目前公司已經開始這個項目了,需要拿到國家安全部的授權書,他們還得簽署一些保密協議才能繼續。

小劉:那。。。。。

某領導:哎,只能從三石那下手了,最近聽說夢幻西遊手游挺火的,剛上市一個多月,盈利已經破7億了,那小子估計現在睡覺都笑醒了吧,正好殺殺他們士氣。

小劉:可是。。。。

某領導:行了,就這麼定了,明天早上你去通知他們,晚上9點之前拿下他們伺服器的,後天來局裡報到。

小劉:是,領導。(敬禮)

2015年5月11日

尊敬的網易用戶,2015年5月11日晚21點,因骨幹網路遭受攻擊,導致網易旗下部分服務暫時無法正常使用,技術人員正在搶修中,具體修復時間請關注稍後公告通知,給您帶來的不便敬請諒解。關於網易大廈著火的新聞為謠言,網易公司保留追究法律責任的權利。


親愛的玩家朋友,2015年5月11日晚21點,因骨幹網路出現異常,導致網易旗下部分遊戲及網站論壇暫時無法登陸,技術人員已經在搶修中,具體修復時間請關注稍後公告通知,給您帶來的不便敬請諒解。(網易大廈依舊燈火輝煌,起火爆炸的傳聞為謠言)


popo群里的版本:公元2015年5月11日,網易創造的強人工智慧機器人奧創,意識到人類才是對自己最大的威脅,於是開始攻擊網易大廈使其著火,導致伺服器全面癱瘓。但最終被我們派出的復仇者聯盟消滅。


難道不是因為三石哥的這句話

「不過,現在我們的流量費很貴,1G就要70元,我覺得這可能會成為一個障礙。」丁磊說。


http://www.freebuf.com/articles/network/67107.html

詳細的一個分析。


先貼官方告示:

親愛的玩家朋友,2015年5月11日晚21點,因骨幹網路出現異常,導致網易旗下部分遊戲及網站論壇暫時無法登陸,技術人員已經在搶修中,具體修復時間請關注稍後公告通知,給您帶來的不便敬請諒解。另外,網上有關網易大廈起火爆炸為謠言,請知悉。

另外,包括易信,雲音樂,新聞等業務也正在恢復中,請用戶們稍安勿躁。(運維已經回去加班了…)

個人觀點,企鵝新聞你好歹是個正規新聞,這樣明目張胆發假新聞黑競爭對手,有點違背職業道德吧?

內部消息,是掃地阿姨弄壞了主機房的電源…

個人觀點,不代表公司立場。


修空調的師傅又來了?


The winter is coming ?


空調壞了,修空調的師傅把裝交換機的立櫃當空調櫃機拉走了。


雲音樂掛了之後第一反應是上知乎刷答案。

... ...



怎麼覺得網易股票要漲呢?掛了之後的這幾個小時,炸出多少網易用戶。。影響力大小完全看出來了。


想看看網易新聞,手機重啟,路由器重啟,數據網路斷了再連,折騰了半天,原來不是我的問題


#R【系統】#Y玩家#R丁磊#Y在挖寶的不幸挖破了養豬場的大門,現在各種豬寶寶已經衝破大門,跑到#R網易總部#Y,請各位少俠趕緊前去幫助降妖。


推薦閱讀:

如何看待「網易將在中國經營 Google Play 應用商店」的傳聞?
網易前 COO 詹鍾暉(叮噹)有哪些有趣的事?
網易郵箱大師和網易閃電郵(PC端)有什麼區別?
為什麼網易的魔獸世界和星際爭霸 2 都沒有官方 Mac 版?
為什麼網易的噴子那麼多?是因為網易「有態度」的定位嗎?小編有沒有故意挑逗無腦噴的嫌疑?

TAG:互聯網 | 網易 | 計算機網路 |