網(wǎng)易云音樂，“省”出事故？

周一下午3點，用戶打不開網(wǎng)易云音樂了。宕機長達兩小時，“網(wǎng)易云音樂崩了”登上熱搜第一。

在一個需要精神撫慰的工作日下午大面積癱瘓，不管從輿論角度，還是內(nèi)部組織角度，這對網(wǎng)易都是一場級別極高的事故。

官方賬號很快回應(yīng)是基礎(chǔ)設(shè)施出了故障；晚上9點，網(wǎng)易云音樂又補充稱，是因為“業(yè)務(wù)擴容”出現(xiàn)的技術(shù)事故。

無論是“基礎(chǔ)設(shè)施”還是“業(yè)務(wù)擴容”，這些解釋普通人幾乎都很難看懂。

流言開始以大家能理解的方式口口相傳，版本不一，但背后的敘事邏輯無外乎“裁員裁到大動脈”，程序員離職報復(fù)導(dǎo)致的問題——這是大家喜聞樂見的爽文模式。

網(wǎng)易很快辟謠，稱“沒有刪庫、沒有跑路”。

截至發(fā)稿，網(wǎng)易集團沒有對外釋放更詳細(xì)的解釋公告；但根據(jù)目前兩個公開解釋，結(jié)合網(wǎng)易云音樂近期的技術(shù)動作，背后的原因也幾乎浮現(xiàn)出來。

答案其實還是“省錢”。

但這個“省”并不一定直接指向裁員。而是指網(wǎng)易在技術(shù)基建、方案上的省錢；也指網(wǎng)易這家公司在創(chuàng)始人就是唯一決策人的文化基因下，一直貫徹的省錢稟賦。

01

一位大公司的技術(shù)人員告訴我們，所謂“業(yè)務(wù)擴容”，是公司為了應(yīng)對更多用戶或者更大規(guī)模的使用需求，在技術(shù)上增加或升級服務(wù)能力。這是一個相對常規(guī)的動作，是一家公司在正常運維過程中需要保障的東西。

簡而言之，“業(yè)務(wù)擴容”對一家技術(shù)合格的公司幾乎不可能會造成如此嚴(yán)重的問題。

網(wǎng)易集團是目前中國互聯(lián)網(wǎng)市值前五的上市公司，云音樂也是一家年收入已經(jīng)達到20億的上市公司，這意味著，正常“業(yè)務(wù)擴容”不太可能、也不應(yīng)該出現(xiàn)這樣級別的事故。

網(wǎng)易此次的特殊性在于，它剛剛完成了從杭州到貴州數(shù)據(jù)中心的遷移。

7月11日，網(wǎng)易云音樂技術(shù)團隊在程序員社區(qū)“稀土掘金”以及自己的公眾號都發(fā)布了一篇名為《云音樂貴州機房遷移總體方案回顧》（后續(xù)簡稱《遷移方案》）的文章。

通過文章，我們可以看出云音樂整體遷移至貴州機房是一個巨大的系統(tǒng)工程，規(guī)模大、難點多、風(fēng)險大。

上述大公司技術(shù)人員向我解釋，像貴州機房這種規(guī)模的遷移即便完成也可能有很大潛在問題，因為它會讓整體穩(wěn)定性和保障性降低。在這樣的設(shè)施基礎(chǔ)上，一次簡單的“業(yè)務(wù)擴容”就可能讓問題大爆發(fā)。

換句話說，雖然網(wǎng)易云音樂宕機可能并不發(fā)生在遷移過程中，但因為換到了貴州機房，網(wǎng)易很多應(yīng)用的穩(wěn)定性至少在短時間內(nèi)會變得更加脆弱。

既然一次大規(guī)模遷移可能帶來多次不可預(yù)知的問題——不到半年前的3月，網(wǎng)易云音樂也出現(xiàn)過短暫宕機——那為什么一定要遷到貴州？

地理要素是其一，比如貴州一年四季氣候涼爽宜人，其喀斯特地貌和洞穴可以為服務(wù)器更好降溫；而且貴州遠(yuǎn)離地震帶，是很安全的數(shù)據(jù)儲存庫。

但對企業(yè)來說，更重要的決策原因可能還要回到我們一開始就已經(jīng)提到的答案：省錢。

根據(jù)China Daily的報道，與在東南部沿海地區(qū)建立同樣的數(shù)據(jù)中心相比，在貴州可以節(jié)省大約58%的電費。1萬個標(biāo)準(zhǔn)服務(wù)器機架，每年光電費就可以節(jié)省1.3億元。更別提貴州作為大數(shù)據(jù)產(chǎn)業(yè)先行區(qū)，提供的政策支持和稅收優(yōu)惠了。

這與想降本增效的大公司一拍即合。

2021年到2022年，騰訊是對“降本增效”最明確的公司，它也是第一個在貴州建立數(shù)據(jù)中心的大公司。到2022年9月，網(wǎng)易貴安數(shù)據(jù)中心項目也正式簽約，項目規(guī)劃的標(biāo)準(zhǔn)機架就是1萬架。

這意味著，這個項目落地后，網(wǎng)易未來在數(shù)據(jù)中心的花費上，僅電費就可以節(jié)省1.3億元。

02

省錢換更好的地方無可指摘。但對網(wǎng)易來說，宕機事故的爆發(fā)，再往深追溯，其實是另一個問題——技術(shù)基建的薄弱。

大規(guī)模的數(shù)據(jù)遷移以及后續(xù)的保障是考驗一家公司技術(shù)底子的時候。在《遷移方案》中，網(wǎng)易技術(shù)團隊就列出了一系列技術(shù)債務(wù)；遷移完成后，也反思還存在應(yīng)用元信息（即“信息標(biāo)簽”）建設(shè)不足、應(yīng)用配置等多個問題。

保障性和穩(wěn)定性也依然存在漏洞，網(wǎng)易技術(shù)團隊自己總結(jié)：

“盡管在貴州機房遷移中，做了大量的穩(wěn)定性保障措施，但依賴每個研發(fā)對各自負(fù)責(zé)領(lǐng)域的理解、運維能力。是否能在團隊管理、設(shè)施管理、服務(wù)管理、穩(wěn)定性管理、架構(gòu)設(shè)計等多方面，探索出一套可持續(xù)的長效保障機制？并進行一定的穩(wěn)定性系統(tǒng)化建設(shè)？從而避免點狀問題隨機發(fā)生。”

這個問題暫時無人可以回答，或許在這次事故出現(xiàn)后的復(fù)盤里，技術(shù)團隊可以重提。

不過一家企業(yè)技術(shù)基建、技術(shù)團隊管理的問題，歸根究底也是它的文化和組織優(yōu)先級的問題。

一位網(wǎng)易前員工告訴我們，網(wǎng)易并不是個追求技術(shù)先進的公司；技術(shù)架構(gòu)可能一開始還行，但后來會因為工期問題，只能繼續(xù)往上堆垃圾。

另一位從網(wǎng)易跳槽到阿里的員工，對比兩家公司的技術(shù)基建，也覺得網(wǎng)易在技術(shù)投入上過于看重投入產(chǎn)出比，一旦看不到效果就收縮，難有動力長期投入。

網(wǎng)易對技術(shù)人才的重視度從招聘上也能看出。不僅平均薪資低于其他大廠，崗位也更少。

一位今年畢業(yè)的技術(shù)崗位應(yīng)屆生告訴我，在他們理想公司的排序里，字節(jié)是首選；阿里和騰訊是優(yōu)選；快手對新技術(shù)很看重，面試體驗不錯；而京東和網(wǎng)易崗位不多，在校招生中存在感不強。

相比追求技術(shù)進步，網(wǎng)易是一家產(chǎn)品文化驅(qū)動的公司。這也跟創(chuàng)始人的志趣相關(guān)。

創(chuàng)業(yè)前兩年，網(wǎng)易創(chuàng)始人丁磊還在擔(dān)任網(wǎng)易的聯(lián)席首席技術(shù)執(zhí)行官；到2005年底，他仍是網(wǎng)易的首席架構(gòu)師。此后，你能看到，他的興趣就從技術(shù)轉(zhuǎn)移到了產(chǎn)品，他在逐漸成為網(wǎng)易的“頭號產(chǎn)品經(jīng)理”。

對丁磊來說，產(chǎn)品經(jīng)理的含義非常廣闊。互聯(lián)網(wǎng)應(yīng)用、實體商品、游戲，他的好奇心強烈，新點子也源源不斷；而這些新點子可以在網(wǎng)易這個王國里完全地被滿足、被試驗。

游戲賺錢、環(huán)境很好的時候，杭州研究院幾乎就是丁磊個人興趣的實驗室。這里孵化了多個業(yè)務(wù)，云音樂、云課堂都是從這里出生，他們獨立、壯大，有的甚至上市。

丁磊得到的正反饋越多，就越發(fā)肯定自己，他有時對產(chǎn)品經(jīng)理們說，“我覺得自己的產(chǎn)品能力越來越強了。”

在網(wǎng)易，普通員工與丁磊打交道最多的一類也是產(chǎn)品經(jīng)理。有員工看到，在丁磊的眼里，技術(shù)員工只會跟他說能不能實現(xiàn)，設(shè)計的作用是具象化，跟他們討論都不過癮，只有產(chǎn)品經(jīng)理能接住他的理念。

和其他已經(jīng)實現(xiàn)了更現(xiàn)代化治理的公司相比，網(wǎng)易仍是一家創(chuàng)始人介入深、說了算的公司。這意味著，對技術(shù)投入程度基本取決于老板的心態(tài)。

年景好的時候，網(wǎng)易也有資金投在數(shù)據(jù)中臺、云服務(wù)的建設(shè)上，但這個錢不好掙，也沒有創(chuàng)造一個產(chǎn)品來得開心和有成就感。年景不好的時候，這都是需要被收縮和優(yōu)化的項目。

網(wǎng)易員工私下談?wù)撈鸲±冢稳菟允莻€“寧波小老板”。

一位網(wǎng)易前員工看到，5000元的項目，管理層都得拿著單子親自找丁磊簽字，也得提前準(zhǔn)備好答案以防丁老板問起細(xì)節(jié)。

這種生意人的特點，可以解釋丁磊為什么從不投資網(wǎng)易的離職創(chuàng)業(yè)者。他在跟吳曉波的一次對談中，說只相信自己的“商業(yè)模式”，只做自己懂、或者感興趣的事情。

創(chuàng)始人的稟賦讓網(wǎng)易在大環(huán)境開始變化時，提前就開始應(yīng)對。2018年后，丁磊就已經(jīng)陸續(xù)開始對“興趣項目”進行盤點，2022年，整個互聯(lián)網(wǎng)行業(yè)都在省錢，而網(wǎng)易趕在寒流到來之前就完成了大部分的“降本增效”。

回到技術(shù)基礎(chǔ)設(shè)施建設(shè)的問題，一位員工拋出自己的觀點：“你如果是一個‘鄉(xiāng)鎮(zhèn)企業(yè)家’，會重點投入在生產(chǎn)線升級換代上嗎？”