大數(shù)據(jù)技術(shù)包括自動化數(shù)據(jù)采集、海量儲存、大規(guī)模并行計算、云計算之類的,這些技術(shù)可以說在任何一個行業(yè)都會有應(yīng)用,一些傳統(tǒng)問題可以改用大數(shù)據(jù)相關(guān)的技術(shù)解決。下面開始舉例子。
固體力學(xué)、流體力學(xué)等領(lǐng)域的計算(如水文預(yù)報等),原先一般在工作站、自建服務(wù)器上運行,現(xiàn)在像其他計算密集型應(yīng)用一樣,可以使用云計算服務(wù)商的“彈性計算”業(yè)務(wù),如亞馬遜的AWS EC2,見縫插針地利用機(jī)群空閑的計算資源進(jìn)行計算,可以顯著降低計算成本。
水文站、氣象站從最初的人工測量,到電子測量,再到現(xiàn)在信息化的電子測量。大數(shù)據(jù)技術(shù)提高了工作流程的自動化程度和數(shù)據(jù)的集中化程度。在信息化程度比較高的流域,流域集控中心可以實時查看節(jié)制閘、測站的信息。這些應(yīng)用的數(shù)據(jù)量之大,不亞于城市監(jiān)控錄像這種典型的大數(shù)據(jù)應(yīng)用。
另外,無人機(jī)巡堤也逐漸在各地推廣,未來的發(fā)展趨勢肯定是無人機(jī)聯(lián)網(wǎng),逐漸接入現(xiàn)有的集控平臺。
計算、網(wǎng)絡(luò)資源逐漸成為像水和電力一樣的基本生產(chǎn)資料,大數(shù)據(jù)技術(shù)作為一種基礎(chǔ)技術(shù)正以多種形式向各行各業(yè)滲透。
舉個簡單的例子,最近在搞旋噴防滲墻,在選用噴射壓力的時候都是按照標(biāo)準(zhǔn)規(guī)范來。咨詢了一下當(dāng)年水電基礎(chǔ)局編制規(guī)范的專家,由于不同地基的構(gòu)成不一樣,無法計算出1m直徑需要多大壓力。所以當(dāng)時采用了上萬工程實例,平均下來40mPa的噴射直徑大概在1~1.2m。
大數(shù)據(jù)的概念近幾年火爆,是因為過去很多數(shù)據(jù)無法廣泛采集,抽樣調(diào)查又有天生的缺陷。在工程上,由于信息化的加快,制定標(biāo)準(zhǔn)時的數(shù)據(jù)量比以前大的多?;诖髷?shù)據(jù)分析得出的標(biāo)準(zhǔn)規(guī)范,肯定會更加準(zhǔn)確。
最直接的,大數(shù)據(jù)的應(yīng)用可以加快水利土木等工程學(xué)科的信息化進(jìn)程,從而實現(xiàn)更加科學(xué)的管理。
在各種數(shù)字化應(yīng)用的普及和新興產(chǎn)業(yè)的帶動下,水利土木等工程行業(yè)積累的數(shù)據(jù)資源也在呈級數(shù)增長,形成海量的數(shù)據(jù)源,因此使得這些工程學(xué)科有了應(yīng)用大數(shù)據(jù)技術(shù)的條件和需求。面對水利土木工程行業(yè)內(nèi)新興專業(yè)和產(chǎn)業(yè)的發(fā)展,傳統(tǒng)意義上的數(shù)據(jù)采集已經(jīng)不能隨著建設(shè)內(nèi)容和目標(biāo)的要求進(jìn)行人性化調(diào)整,無法滿足當(dāng)代信息化建設(shè)發(fā)展要求,因此追求高價值含量的工程信息大數(shù)據(jù)時代已經(jīng)來臨。
我們在水利土木工程方面積累的海量數(shù)據(jù),其本身是沒有價值的,而我們需要做的,就是對大數(shù)據(jù)進(jìn)行處理,通俗地講,就是相關(guān)性分析。對原本枯燥的數(shù)據(jù)進(jìn)行統(tǒng)計學(xué)的相關(guān)性分析,可以尋找其背后的規(guī)律本質(zhì)。這樣才能為國計民生作出預(yù)測。尋找相關(guān)性,將大數(shù)據(jù)中某些事件的共同點找出,并藉此發(fā)現(xiàn)其共有屬性,將很大程度上可以“預(yù)測”未來,這是大數(shù)據(jù)時代對工程學(xué)科的價值所在。
事實上,這也是水利土木等工程學(xué)科所欠缺的地方。因為該領(lǐng)域起步晚、專業(yè)相對封閉,信息化建設(shè)水平、管理和應(yīng)用深度與國內(nèi)外的信息化建設(shè)相比尚存在不小的差距。
目前,市場上已經(jīng)有越來越多的大數(shù)據(jù)產(chǎn)品和解決方案,比如FusionInsight,這是華為基于Apache開源社區(qū)軟件進(jìn)行了功能增強的大數(shù)據(jù)存儲、查詢和分析的統(tǒng)一平臺,該平臺提供大數(shù)據(jù)分析應(yīng)用開發(fā)能力,并將這些能力開放給客戶,聚合具備如數(shù)據(jù)運營、數(shù)據(jù)所有、數(shù)據(jù)開發(fā)等各種專業(yè)能力的合作伙伴,共同打造創(chuàng)新的大數(shù)據(jù)商業(yè)生態(tài)。
而目前類似的大數(shù)據(jù)解決方案已被廣泛應(yīng)用于互聯(lián)網(wǎng)、零售、金融等領(lǐng)域,相信對于水利工程學(xué)科來說,大數(shù)據(jù)技術(shù)的應(yīng)用前景一樣非常廣闊。