薛小征/中國(guó)氣象局公共氣象服務(wù)中心
大數(shù)據(jù)時(shí)代背景下的氣象服務(wù)
薛小征/中國(guó)氣象局公共氣象服務(wù)中心
隨著“互聯(lián)網(wǎng)+”概念的不斷深入,“大數(shù)據(jù)”已經(jīng)逐漸成為一個(gè)流行詞語(yǔ)。“大數(shù)據(jù)”產(chǎn)生的前提是整個(gè)社會(huì)走向數(shù)字化,并伴隨著云計(jì)算技術(shù)和搜索引擎的不斷發(fā)展,從而使得對(duì)大數(shù)據(jù)的高效分析成為可能。大數(shù)據(jù)在社會(huì)行為分析、科學(xué)發(fā)現(xiàn)、公共安全和政府決策中的作用越來(lái)越大,而這其中,氣象是一個(gè)不可或缺的應(yīng)用領(lǐng)域,不但與群眾生活息息相關(guān),并且關(guān)系到國(guó)計(jì)民生。據(jù)統(tǒng)計(jì),2011年全球的數(shù)據(jù)規(guī)模為1.8ZB, 而到2013 年,僅中國(guó)當(dāng)年產(chǎn)生的數(shù)據(jù)總量就已超過(guò)0.8ZB,2倍于2012年,相當(dāng)于2009年全球的數(shù)據(jù)總量。預(yù)計(jì)到2020年,中國(guó)產(chǎn)生的數(shù)據(jù)總量將是 2013年的10倍,超過(guò)8.5ZB。而屆時(shí)全球的數(shù)據(jù)總量預(yù)計(jì)將達(dá)到40ZB,數(shù)據(jù)量暴增的速度令人瞠目結(jié)舌。而對(duì)于氣象數(shù)據(jù)來(lái)言,“氣象部門需要永久保存的數(shù)據(jù)目前約有4PB~5PB,年增量約1PB”,相較于其他應(yīng)用領(lǐng)域而言,氣象行業(yè)的公共服務(wù)職能越來(lái)越強(qiáng),面向政府提供決策服務(wù),面向公眾提供氣象預(yù)報(bào)預(yù)警服務(wù),面向社會(huì)發(fā)展,應(yīng)對(duì)氣候發(fā)展節(jié)能減排。這些決策信息的獲取依賴于我們對(duì)氣象數(shù)據(jù)的處理。由此可知,基于氣象海量數(shù)據(jù)之上的氣象業(yè)務(wù)、天氣預(yù)報(bào)、氣候預(yù)測(cè)以及氣象服務(wù)的應(yīng)用“大數(shù)據(jù)時(shí)代”已經(jīng)來(lái)臨。
大數(shù)據(jù);時(shí)代背景;氣象服務(wù)
“數(shù)據(jù)就像一個(gè)神奇的鉆石礦,當(dāng)它的首要價(jià)值被發(fā)掘后仍能不斷給予”,它目前展現(xiàn)在人們面前僅僅是其總價(jià)值的“冰山一角”。雖然一些數(shù)據(jù)所蘊(yùn)含的其所屬領(lǐng)域的內(nèi)部規(guī)律(即所謂“首要價(jià)值”)已被本領(lǐng)域?qū)<页浞职l(fā)掘,但如果將這些數(shù)據(jù)與其它領(lǐng)域數(shù)據(jù)相鏈接,卻有可能發(fā)現(xiàn)出許多意想不到的相關(guān)關(guān)系,即所謂“豐富的未知價(jià)值在領(lǐng)域的外部” 。
因此,數(shù)據(jù)的價(jià)值由“內(nèi)部自身”和“外部關(guān)聯(lián)”兩部分組成:內(nèi)部自身價(jià)值是指該數(shù)據(jù)自身所包含的所有信息對(duì)其所屬企業(yè)和部門業(yè)務(wù)工作的支撐以及開(kāi)拓業(yè)務(wù)領(lǐng)域的作用;而外部關(guān)聯(lián)價(jià)值則是指該數(shù)據(jù)與外部企業(yè)、領(lǐng)域和行業(yè)數(shù)據(jù)進(jìn)行深度結(jié)合以及具有創(chuàng)意的分析思路和有效的處理方法,從而發(fā)掘出新的、超出所屬企業(yè)和部門原有業(yè)務(wù)范圍的、傳統(tǒng)思維所意想不到的、具有開(kāi)創(chuàng)意義的信息,眾多企業(yè)和行業(yè)部門可由此了解并掌握用傳統(tǒng)思維和方法無(wú)法獲得的事實(shí),并因此可創(chuàng)造出新的經(jīng)濟(jì)和社會(huì)價(jià)值。無(wú)論是否處于“大數(shù)據(jù)時(shí)代”,數(shù)據(jù)的價(jià)值概莫能外。而所謂“大數(shù)據(jù)應(yīng)用”是由于近二十余年來(lái),各行業(yè)信息化程度逐漸提高,互聯(lián)網(wǎng)及其豐富的應(yīng)用逐漸滲透到人類社會(huì)各個(gè)階層的方方面面,在使得人們的工作和生活更加舒適、方便、快捷和安全的同時(shí),也將社會(huì)上各方面信息通過(guò)網(wǎng)絡(luò)(尤其是互聯(lián)網(wǎng))采集并收集管理起來(lái),從而導(dǎo)致社會(huì)上數(shù)據(jù)總量以令人瞠目結(jié)舌的速度暴增,而這些暴增起來(lái)的數(shù)據(jù)也逐漸呈現(xiàn)出與此前數(shù)據(jù)所不同的性質(zhì)和特征。由于此時(shí)的數(shù)據(jù)具有多樣性的特性,所含信息種類較之此前大大增加,人們有可能通過(guò)分析這些信息,獲得以前不可能得到的新的知識(shí)、預(yù)測(cè)信息,激發(fā)出新的開(kāi)拓性思維,乃至開(kāi)創(chuàng)新的業(yè)務(wù)領(lǐng)域。
氣象行業(yè)是信息化建設(shè)較早的行業(yè),氣象科學(xué)家分析研究氣象數(shù)據(jù)已有近百年的歷史。直到目前,氣象數(shù)據(jù)的核心內(nèi)容并未發(fā)生根本性變化,近年來(lái)所增設(shè)的新的探測(cè)手段(如氣象衛(wèi)星、天氣雷達(dá)等),其探測(cè)信息最終都將反演成溫、壓、濕、風(fēng)以及云能天等有限的幾個(gè)氣象要素,以供業(yè)務(wù)及科研使用。而這些要素之間的物理關(guān)系,早已被動(dòng)力氣象學(xué)解釋清楚。已有數(shù)十年歷史的傳統(tǒng)的統(tǒng)計(jì)氣候業(yè)務(wù),正是采用復(fù)雜的統(tǒng)計(jì)方法,對(duì)氣象要素進(jìn)行時(shí)間、空間分布方面的詳盡分析,發(fā)現(xiàn)其中的規(guī)律,進(jìn)而完成氣候統(tǒng)計(jì)預(yù)測(cè)的。因此氣象數(shù)據(jù)中常規(guī)探測(cè)部分對(duì)于氣象行業(yè)而言,其常規(guī)的基本價(jià)值(對(duì)天氣預(yù)報(bào)、氣候預(yù)測(cè)以及其它專業(yè)氣象預(yù)報(bào)的貢獻(xiàn))已被充分認(rèn)識(shí)并挖掘。而其中可能潛藏的反映本領(lǐng)域內(nèi)天氣或氣候規(guī)律的新的信號(hào),正在由數(shù)以千計(jì)的氣象科學(xué)家們分析研究著。
氣象數(shù)據(jù)與其它專業(yè)領(lǐng)域數(shù)據(jù)的綜合分析將產(chǎn)生巨大的價(jià)值,目前氣象部門已經(jīng)積極開(kāi)展對(duì)外合作,并與農(nóng)業(yè)信息部、旅游局、交通運(yùn)輸部、環(huán)保局等部委開(kāi)展戰(zhàn)略合作。同時(shí)加快了與百度、阿里巴巴、騰訊等知名互聯(lián)網(wǎng)企業(yè)的合作。通過(guò)聯(lián)合研發(fā)深度挖掘氣象數(shù)據(jù)與行業(yè)間數(shù)據(jù)的應(yīng)用。
從所周知,大數(shù)據(jù)已經(jīng)不簡(jiǎn)簡(jiǎn)單單是數(shù)據(jù)超級(jí)龐大的事實(shí)了,而最重要的事情是拿到大數(shù)據(jù)之后如何對(duì)其進(jìn)行深度的分析,只有通過(guò)充分的分析挖掘,才能從海量的數(shù)據(jù)集群當(dāng)中獲取更多智能的、深入的、有價(jià)值的信息。借助大數(shù)據(jù),人們能夠更清楚地掌握天氣對(duì)于零售業(yè)的影響。相關(guān)統(tǒng)計(jì)表明,流通類銷售額的65%取決于天氣,因?yàn)樘鞖庵苯佑绊懭说纳?、心理,支配他們的消費(fèi)行為。氣溫相差1攝氏度或降水量增減1毫米,反映到商場(chǎng)和客流及銷量都有明顯變化。這也就是經(jīng)濟(jì)學(xué)界所謂的“一度效應(yīng)”。
在美國(guó),氣象服務(wù)市場(chǎng)已經(jīng)開(kāi)放多年,各家氣象服務(wù)公司的商業(yè)化模式也已經(jīng)相對(duì)成熟,與氣象相關(guān)的服務(wù)每年就有上千億美元的盈收。氣象服務(wù)對(duì)農(nóng)業(yè)、交通、旅游和一些戶外行業(yè)有著很大的影響。比如交通方面,在一次強(qiáng)降雪過(guò)程到來(lái)后,相關(guān)部門對(duì)鏟雪時(shí)間的把控就顯得尤為重要,又或者是存在大量戶外工作量的快遞業(yè),不管是運(yùn)輸車輛或者快遞員,都對(duì)氣象服務(wù)有著密切的需求。在農(nóng)業(yè)上,每一場(chǎng)降雨對(duì)農(nóng)作物的生長(zhǎng)都會(huì)產(chǎn)生影響,美國(guó)的氣象服務(wù)公司通過(guò)精準(zhǔn)的天氣預(yù)報(bào)結(jié)合新型硬件設(shè)備,可以幫助種植者更好地調(diào)控農(nóng)作物的生長(zhǎng)環(huán)境,從而提高產(chǎn)量。
氣象大數(shù)據(jù)的應(yīng)用分析更為實(shí)際的案例發(fā)生在德國(guó).氣溫超過(guò)22攝氏度,啤酒開(kāi)始勁銷,氣溫再每上升1攝氏度,大瓶裝的啤酒每天會(huì)多銷 230萬(wàn)瓶,德國(guó)氣象公司由此開(kāi)發(fā)了相關(guān)的“啤酒指數(shù)”。此外,還有乘車指數(shù)、冰激凌指數(shù)、泳裝指數(shù)、食品霉變指數(shù)等,商家可據(jù)此提前制訂生產(chǎn)營(yíng)銷計(jì)劃。精明的商家根據(jù)天氣預(yù)報(bào)的情況,就能提前確定庫(kù)存和商品品種,以利用氣溫、降雨等變化增加銷售量。
在國(guó)內(nèi),相關(guān)的氣象服務(wù)才剛剛起步,商業(yè)氣象服務(wù)市場(chǎng)更是一片空白,已有的氣象服務(wù)遠(yuǎn)遠(yuǎn)不能滿足農(nóng)業(yè)、交通等行業(yè)的需求。而氣象的影響和相應(yīng)的服務(wù)需求,從古至今都切實(shí)的存在著。據(jù)統(tǒng)計(jì),中國(guó)每年因氣象災(zāi)害造成的直接經(jīng)濟(jì)損失占GDP的3% ~ 6%,全球每年氣象災(zāi)害占自然災(zāi)害的70%,平均損失超過(guò)300億美元。隨著互聯(lián)網(wǎng)技術(shù)的不斷升級(jí),經(jīng)濟(jì)全球化速度的加快,農(nóng)業(yè)、交通、旅游、航空、零售業(yè)等等多個(gè)行業(yè)對(duì)氣象服務(wù)的依賴更是日漸緊密,這就給氣象工作者提出了更高的要求。
在諸多案例里面,氣象大數(shù)據(jù)也就是氣象數(shù)據(jù)加上行業(yè)數(shù)據(jù)等于事情能夠發(fā)生的變化規(guī)律和對(duì)未來(lái)的一些預(yù)測(cè),氣象數(shù)據(jù)能做這樣的事情是因?yàn)榭陀^、穩(wěn)定而且量非常大。而且氣象數(shù)據(jù)和各行各業(yè)的相關(guān)性非常高,過(guò)去說(shuō)預(yù)測(cè)就是觀天象,一個(gè)是看天,還有就是氣象。在現(xiàn)代一些系統(tǒng)內(nèi)的學(xué)者和社會(huì)上的學(xué)者研究,我們發(fā)現(xiàn)氣象通過(guò)大數(shù)據(jù)的應(yīng)用有非常大的應(yīng)用領(lǐng)域,比如說(shuō)能源,可以觀測(cè)到電力負(fù)荷歷史,加上氣象條件 進(jìn)行用電量估算,農(nóng)業(yè)也是一樣,建筑行業(yè)也是,通過(guò)工期歷史加上歷史天氣就可以知道工期預(yù)測(cè);還有交通,航班準(zhǔn)點(diǎn)率歷史加上機(jī)場(chǎng)歷史天氣,就可以航班延誤 預(yù)測(cè),準(zhǔn)確性非常高;還有公共衛(wèi)生,通過(guò)門診量和藥品銷量加上氣象歷史就可以知道發(fā)病率預(yù)測(cè);在飲品方面,通過(guò)銷量和溫度就可以知道銷量預(yù)測(cè);在生產(chǎn)方面,通過(guò)經(jīng)濟(jì)數(shù)據(jù)加上氣象條件可以知道中國(guó)宏觀經(jīng)濟(jì)判斷條件,這是技術(shù)性比較成熟;還有旅游,我們通過(guò)有客對(duì)旅游景區(qū)的評(píng)價(jià)和評(píng)價(jià)條件可以知道什么樣的景區(qū)適合什么天氣旅游。
曾經(jīng)嘗試與保險(xiǎn)公司推出“賞月險(xiǎn)”的研究,保險(xiǎn)公司因?yàn)闆](méi)有城市陰天或者影響賞月天氣的概率,不知道賠多少錢,所以只能是拍腦袋算。同時(shí),他們通過(guò)天氣網(wǎng)站來(lái)進(jìn)行判責(zé),這個(gè)判責(zé)是不準(zhǔn)確的。未來(lái)我們構(gòu)想,保險(xiǎn)服務(wù)很有可能是做保險(xiǎn)理賠數(shù)據(jù)和天氣數(shù)據(jù)進(jìn)行對(duì)比,能夠?qū)崟r(shí)得出到底是什么樣的天氣造成了什么樣的理賠,這樣還是相對(duì)比較有價(jià)值的。
還有就是對(duì)藥品,西安楊森有一款息斯敏的藥,他們和我們合作,可以通過(guò)天氣歷史數(shù)據(jù)預(yù)測(cè)這個(gè)地區(qū)的過(guò)敏源以及發(fā)病率,得出的結(jié)果非常理想。比如說(shuō)在北京三四月份的時(shí)候連續(xù)幾天溫度低溫,馬上就會(huì)造成非常嚴(yán)重的過(guò)敏問(wèn)題。通過(guò)和氣象大數(shù)據(jù)的分析,可以幫助企業(yè)提前制定藥品的生產(chǎn)和銷售計(jì)劃。
“根據(jù)西方經(jīng)濟(jì)學(xué)德?tīng)柗茪庀笠?guī)律,企業(yè)在氣象信息上投資1元可得到98元的經(jīng)濟(jì)回報(bào)。如果商家在生產(chǎn)、采購(gòu)、銷售計(jì)劃中考慮氣象因素,不僅能避免損失,還可以變成在競(jìng)爭(zhēng)中的優(yōu)勢(shì),幫助企業(yè)預(yù)測(cè)并確定生產(chǎn)營(yíng)銷計(jì)劃?!?/p>
在我國(guó),氣象大數(shù)據(jù)的應(yīng)用也已經(jīng)陸續(xù)開(kāi)展起來(lái)。我國(guó)氣象服務(wù)目前的社會(huì)經(jīng)濟(jì)效益投入與產(chǎn)出比達(dá)約為1:40—1:50。氣象大數(shù)據(jù)在各個(gè)行業(yè)中的潛能還有待充分的挖掘,專業(yè)氣象服務(wù)的發(fā)展空間還有待進(jìn)一步開(kāi)拓。
氣象數(shù)據(jù)對(duì)于全社會(huì)而言,是極其珍貴的數(shù)據(jù)和信息資源。我們期待著氣象數(shù)據(jù)在跨行業(yè)綜合應(yīng)用這一“外部關(guān)聯(lián)價(jià)值”挖掘過(guò)程中煥發(fā)出新的耀眼光芒。而在此之前,氣象預(yù)報(bào)服務(wù)產(chǎn)品的廣泛社會(huì)應(yīng)用,將是氣象部門履行職責(zé),服務(wù)社會(huì)的工作重點(diǎn);它與氣象數(shù)據(jù)的價(jià)值挖掘一道,成為氣象業(yè)務(wù)中不可或缺的組成部分。氣象大數(shù)據(jù)是氣象工作者未來(lái)做好氣象服務(wù)的重中之重。隨著氣象行業(yè)的公共服務(wù)職能越來(lái)越強(qiáng)大,諸如面向政府提供決策服務(wù),面向公眾提供氣象預(yù)報(bào)預(yù)警服務(wù),面向社會(huì)發(fā)展需要,應(yīng)對(duì)氣候變化節(jié)能減排等等,這些服務(wù)信息如何才能突破現(xiàn)有的服務(wù)瓶頸,如何更好的體現(xiàn)海量氣象數(shù)據(jù)的市場(chǎng)價(jià)值,這些都取決于我們未來(lái)如何運(yùn)用氣象大數(shù)據(jù)。
[1] 沈文海.氣象數(shù)據(jù)的“大數(shù)據(jù)應(yīng)用”淺析[J].中國(guó)信息化,2014(6).
[2]Hand DJ.Principles of data mining.Drug Safety,2007,30(7);621 -622.
[3]王星.大數(shù)據(jù)分析;方法與應(yīng)用[M].北京;清華出版社,2013.
薛小征(1984年12月22日)男,北京,畢業(yè)院校:北京聯(lián)合大學(xué),從事專業(yè):媒體,工作單位:中國(guó)氣象局公共氣象服務(wù)中心,職務(wù):運(yùn)營(yíng)副總監(jiān)。