咪咕“春晚”直播背后的秘密

郭濤

“看春晚，選咪咕”，從足球世界杯直播到“春晚”直播，咪咕視頻已經(jīng)與央視有了多次深度合作。面對巨大的訪問流量和并發(fā)數(shù)，咪咕視頻都能確保視頻直播的順利進(jìn)行。而這一切的背后，正是云計算在默默支持。UCloud（優(yōu)刻得）作為咪咕視頻的合作伙伴，從洞察業(yè)務(wù)需求開始，經(jīng)歷方案的設(shè)計和優(yōu)化，直至直播期間全方位、多層次的運(yùn)維保障，全程助力咪咕春晚直播，為全球觀眾提供更高清更流暢的視覺體驗(yàn)。

服務(wù)到位，才能處之泰然

大約在央視“春晚”舉行前的一個多月，UCloud就接到了為咪咕視頻直播“春晚”提供技術(shù)支持服務(wù)的任務(wù)。區(qū)別于其他云服務(wù)商，UCloud采取的是事業(yè)部制，最前端負(fù)責(zé)了解客戶需求的客戶經(jīng)理、提供方案設(shè)計的解決方案架構(gòu)師，以及提供運(yùn)維服務(wù)的服務(wù)經(jīng)理都在同一個事業(yè)部中，可謂“三位一體”，實(shí)時聯(lián)動，所以能夠在第一時間響應(yīng)客戶的需求。

在接到任務(wù)的第一周，UCloud的客戶經(jīng)理與咪咕視頻一起對“春晚”直播所需的資源情況進(jìn)行調(diào)研和評估，最終確定預(yù)留120%的資源以備不時之需;第二周，“春晚”直播涉及咪咕視頻旗下五六個部門，UCloud主動協(xié)調(diào)這些部門一起進(jìn)行壓力測試，針對可能出現(xiàn)的突發(fā)情況制定預(yù)案，并對現(xiàn)有架構(gòu)進(jìn)行調(diào)整和優(yōu)化;第三周，主要是制定從客戶（咪咕視頻）到服務(wù)商（UCloud）之間的溝通機(jī)制，理順服務(wù)保障流程，確保在故障發(fā)生后能夠快速進(jìn)行恢復(fù);第四周，“春晚”直播前的所有準(zhǔn)備工作就緒，人員分工明確，蓄勢待發(fā)。

咪咕視頻“春晚”直播服務(wù)的項(xiàng)目負(fù)責(zé)人張文墨在談起這次的服務(wù)保障工作時，語氣中并沒有經(jīng)歷了一次驚心動魄的大事件后的激動和興奮，反而顯得十分平靜和淡定。在參與“春晚”直播前，UCloud曾成功地為咪咕視頻足球世界杯等大型直播活動提供服務(wù)保障。有了這些“珠玉”在前，再為“春晚”直播進(jìn)行事前準(zhǔn)備，比如并發(fā)量預(yù)估、架構(gòu)優(yōu)化、預(yù)案制定等方面，UCloud就有了可以借鑒的經(jīng)驗(yàn)，做到心中有數(shù)。另外，在“春晚”直播的整個過程中，沒有出現(xiàn)任何意外或“小插曲”，一切進(jìn)行得十分順利。

張文墨介紹說，在“春晚”直播過程中，他一直在遠(yuǎn)程監(jiān)控，雖然每個小時都要與前方的技術(shù)和服務(wù)人員進(jìn)行一次溝通，但心情一直十分平穩(wěn)，從未有過緊張、焦慮的情緒。他為何能如此泰然？一方面見慣了大陣仗，積累了豐富的經(jīng)驗(yàn);另一方面，咪咕視頻和UCloud在事前的周密準(zhǔn)備是能夠讓人放心的。

別看張文墨現(xiàn)在講起來這么輕松，實(shí)際上UCloud的服務(wù)團(tuán)隊(duì)是“外松內(nèi)緊”，為了保障“春晚”直播的順利進(jìn)行做了大量細(xì)致的工作：在“春晚”直播過程中，UCloud骨干團(tuán)隊(duì)始終堅守在第一線，即在咪咕視頻的“作戰(zhàn)室”嚴(yán)陣以待;另外，UCloud還專門組織了一支專業(yè)技術(shù)團(tuán)隊(duì)，包括OpenStack技術(shù)人員和Ceph技術(shù)骨干，對承載直播的云平臺進(jìn)行實(shí)時監(jiān)控;在后端，UCloud指派了專門的服務(wù)經(jīng)理和技術(shù)人員，遠(yuǎn)程進(jìn)行監(jiān)控和指揮，確保直播萬無一失。

立體服務(wù)，確保萬無一失

從服務(wù)的角度，UCloud安排了各具專長的技術(shù)和服務(wù)人員，組成現(xiàn)場值守、技術(shù)平臺維護(hù)和遠(yuǎn)程監(jiān)控三道嚴(yán)密的“防御線”，保證了“春晚”直播的順利進(jìn)行。從技術(shù)的角度，UCloud也同樣制定了多層次的保障計劃。

支撐此次“春晚”直播的是咪咕視頻基于OpenStack構(gòu)建的私有云。在直播過程中動用了近千個節(jié)點(diǎn)的OpenStack集群，實(shí)際在此基礎(chǔ)上還有進(jìn)一步擴(kuò)展的空間。如果客戶對應(yīng)用規(guī)模有更大的需求，UCloud還可以提供多個OpenStack集群的解決方案，通過統(tǒng)一的云管平臺進(jìn)行高效管理和聯(lián)通。在此次咪咕視頻“春晚”直播中，OpenStack云平臺再次經(jīng)受住了嚴(yán)峻的考驗(yàn)。

像“春晚”這種規(guī)模的直播，對于存儲以及業(yè)務(wù)連續(xù)性提出了更高的要求。在存儲方面，采用了“NAS+Ceph”相結(jié)合的解決方案，Ceph存儲集群的性能和容量可以同時進(jìn)行線性擴(kuò)展，便于調(diào)整，能夠滿足資源靈活伸縮的需求。在災(zāi)難恢復(fù)方面，Ceph本身具有“三副本”機(jī)制，而為了防止Ceph本身宕機(jī)，UCloud又構(gòu)建了另一個Ceph集群作為冷備。

為了確保虛擬機(jī)（VM）和云平臺的高可用性，UCloud也做了周密安排，將數(shù)百臺閑置的物理服務(wù)器納入到本項(xiàng)目的OpenStack集群，一旦出現(xiàn)問題，可以及時將VM遷移到空閑的物理服務(wù)器上。測試數(shù)據(jù)顯示，系統(tǒng)可以在幾分鐘內(nèi)完成VM的遷移，不會對直播產(chǎn)生影響。

咪咕視頻有一些物理機(jī)設(shè)備，為確保災(zāi)難后及時恢復(fù)，UCloud提供了物理機(jī)云設(shè)備管理組件，通過快捷的模板，能夠在幾分鐘內(nèi)重新部署一臺新的物理機(jī)設(shè)備并加入集群。

企業(yè)上云，扶上馬再送一程

UCloud要為咪咕視頻旗下的6個子公司的所有業(yè)務(wù)提供支持和服務(wù)，任務(wù)重且復(fù)雜。經(jīng)過幾年的磨合，到此次“春晚”直播，雙方的技術(shù)和服務(wù)團(tuán)隊(duì)已經(jīng)有了默契。UCloud的服務(wù)體系、服務(wù)能力得到了客戶的充分認(rèn)可，再加上不斷積累的經(jīng)驗(yàn)，讓UCloud在面對像“春晚”直播這樣的業(yè)務(wù)需求量大且復(fù)雜的任務(wù)時能夠游刃有余。

作為UCloud服務(wù)體系中的一員，張文墨的切身體會是，一定要深入客戶的業(yè)務(wù)，熟悉客戶的業(yè)務(wù)場景，這樣才能真正將“以客戶為中心”落在實(shí)處。

通過為客戶提供定制化的服務(wù)，解決客戶遇到的各種應(yīng)用難題，UCloud可以對自己的產(chǎn)品和解決方案進(jìn)行創(chuàng)新和優(yōu)化。比如，為此次“春晚”直播提供的兩個Ceph集群互備的解決方案就是UCloud的創(chuàng)新之舉。另外，通過在服務(wù)過程中與客戶的密切溝通和互動，UCloud可以建立更優(yōu)化的服務(wù)流程和機(jī)制，幫助客戶快速解決問題。

現(xiàn)在，客戶的主要精力都放在了如何讓云快速平穩(wěn)地落地上，在這個過程中，除了關(guān)注云產(chǎn)品和解決方案以外，服務(wù)的重要性也日益凸顯?！捌髽I(yè)在上云之后會不斷發(fā)現(xiàn)新的問題，如果一個云計算廠商只能提供單純的云解決方案，而不能提供后續(xù)的定制化服務(wù)，其實(shí)并不能完全解決用戶上云的后顧之憂?！睆埼哪硎?，“UCloud提供的是‘方案+服務(wù)，通過貼近用戶的業(yè)務(wù)場景，提供定制化的服務(wù)開發(fā)、交付和運(yùn)維，徹底解決用戶上云‘最后一公里的問題。”

“快速定制，貼身服務(wù)，為用戶定制的云”，這才是UCloud努力的方向，也是其提供差異化服務(wù)的基礎(chǔ)。

大多數(shù)云服務(wù)商都有客戶經(jīng)理、解決方案經(jīng)理和服務(wù)經(jīng)理的編制，但是普遍的情況是，這些技術(shù)和服務(wù)人員分屬不同的業(yè)務(wù)部門，有的屬于銷售部，有的屬于技術(shù)部，而由于各個部門之間存在溝通的壁壘，很難形成聯(lián)動。

UCloud的成功之處正在于，它將客戶經(jīng)理、解決方案經(jīng)理和服務(wù)經(jīng)理置于同一個事業(yè)部內(nèi)，從與客戶打交道的最前端，到研發(fā)、服務(wù)的后端，全部串聯(lián)在一起，隨客戶需求而動，快速響應(yīng)，緊密協(xié)同。這正是UCloud服務(wù)“鐵三角”的強(qiáng)大之處。

相關(guān)鏈接

咪咕公司是中國移動面向移動互聯(lián)網(wǎng)設(shè)立的專業(yè)化公司，負(fù)責(zé)音樂、視頻、閱讀、游戲、動漫五大數(shù)字內(nèi)容運(yùn)營，已成為業(yè)內(nèi)正版數(shù)字內(nèi)容匯聚平臺，和國內(nèi)領(lǐng)先的全場景品牌沉浸平臺。一直以來，咪咕通過深耕互聯(lián)網(wǎng)體育、演藝、二次元等垂直領(lǐng)域，尤其是體育版圖的布局，極大地豐富了用戶的內(nèi)容體驗(yàn)。