PB級(jí)數(shù)據(jù)“動(dòng)起來(lái)”

郭濤

“永遠(yuǎn)不要低估一輛滿載著磁帶在高速公路上飛馳的旅行車(chē)的帶寬。”許多人把這句話當(dāng)成調(diào)侃。其實(shí)，最早人們對(duì)數(shù)據(jù)進(jìn)行備份，就是通過(guò)卡車(chē)將滿載的磁帶運(yùn)送到專(zhuān)門(mén)的倉(cāng)庫(kù)存儲(chǔ)起來(lái)。當(dāng)時(shí)，美國(guó)有一家全球知名的專(zhuān)門(mén)從事這項(xiàng)業(yè)務(wù)的公司——“鐵山”（Iron Mountain）。筆者多年前去美國(guó)出差時(shí)，有一次在街頭看到了一輛“鐵山”公司運(yùn)送磁帶的卡車(chē)，還像個(gè)狂熱的粉絲一樣不停地拍照。

后來(lái)，隨著技術(shù)的發(fā)展，在線備份、異地容災(zāi)、兩地三中心等新的數(shù)據(jù)保護(hù)方式越來(lái)越普遍，這種運(yùn)送磁帶的卡車(chē)好像也逐漸淡出了人們的視線。

在時(shí)尚界，復(fù)古一直都被認(rèn)為是一種時(shí)髦和流行。用卡車(chē)運(yùn)送數(shù)據(jù)這事現(xiàn)在又流行回來(lái)了，不過(guò)這次并不僅是為了備份和容災(zāi)，而是為了云中數(shù)據(jù)的快速交換。

AWS先想到了這個(gè)方法，發(fā)布了AWS Snowball。它外形看上去像是一個(gè)大號(hào)手提箱，適合需要大批量傳輸數(shù)據(jù)、有數(shù)據(jù)位于分散位置或需要持續(xù)加載流數(shù)據(jù)的客戶。借助AWS Snowball，AWS的客戶可以更方便、更快速、更經(jīng)濟(jì)地向AWS云平臺(tái)遷移大數(shù)據(jù)集和流數(shù)據(jù)。

雖然光纖骨干網(wǎng)絡(luò)的帶寬也十分可觀，但真要傳輸PB級(jí)的數(shù)據(jù)，光纖技術(shù)也顯得捉襟見(jiàn)肘。“實(shí)體”傳輸這種看上去“笨重而傳統(tǒng)”的方法可能更適合大批量數(shù)據(jù)的交換。Snowball能夠“移動(dòng)”的存儲(chǔ)容量是TB級(jí)的，但是現(xiàn)在TB級(jí)對(duì)有些用戶來(lái)說(shuō)根本不夠用，于是AWS又推出了Snowmobile，用一輛卡車(chē)一次就可以運(yùn)送高達(dá)100PB的容量。

總之，Snowball、Snowmobile成了選用AWS云平臺(tái)的用戶快速上傳和下載PB級(jí)數(shù)據(jù)的一種理想選擇。

現(xiàn)在，阿里云也忍不住出手了。6月10日，在2017年云棲大會(huì)·上海峰會(huì)上，阿里云發(fā)布了一款重磅級(jí)產(chǎn)品——“閃電立方”。

阿里云“閃電立方”是一個(gè)黑色的立方體，可防塵防水，抗震抗壓；可容納100TB數(shù)據(jù)，并能實(shí)現(xiàn)最高30∶1的壓縮比，再配合高效的去重功能可節(jié)省更多存儲(chǔ)空間；內(nèi)置20Gbps的光纖網(wǎng)絡(luò)連接，傳輸速度更快；在數(shù)據(jù)安全方面，“閃電立方”采用AES 256端到端加密算法，密鑰由用戶保管，運(yùn)送過(guò)程中全程斷網(wǎng)，同時(shí)配備24小時(shí)定位監(jiān)控。

阿里云也算了一筆經(jīng)常賬：以1PB數(shù)據(jù)為例，利用普通的辦公網(wǎng)絡(luò)上傳需要1萬(wàn)天，用1Gbps的專(zhuān)線網(wǎng)絡(luò)也需要100多天，而“閃電立方”可在發(fā)起申請(qǐng)后快速送達(dá)用戶的數(shù)據(jù)中心，最快24小時(shí)即可完成對(duì)1PB數(shù)據(jù)的離線拷貝，回寄之后，再離線傳輸至云數(shù)據(jù)中心。整體傳輸費(fèi)用是傳統(tǒng)方式的1/10，效率則提升20倍。

隨著數(shù)據(jù)量的爆炸性增長(zhǎng)，再加上各種云模式的采用，PB級(jí)數(shù)據(jù)移動(dòng)這事可能會(huì)越來(lái)越普遍。Snowball也好，“閃電立方”也罷，用戶可以慎重評(píng)估一下，最直接的方式可能是最好的方式。