大數(shù)據(jù)時代數(shù)據(jù)的特征范文

時間:2023-12-28 17:49:29

導(dǎo)語:如何才能寫好一篇大數(shù)據(jù)時代數(shù)據(jù)的特征,這就需要搜集整理更多的資料和文獻,歡迎閱讀由公務(wù)員之家整理的十篇范文,供你借鑒。

大數(shù)據(jù)時代數(shù)據(jù)的特征

篇1

關(guān)鍵詞:大數(shù)據(jù)時代特征;研發(fā)大數(shù)據(jù);分析平臺;具體策略

中圖分類號:TP391 文獻標識碼:A 文章編號:1009-3044(2016)27-0003-02

正是互聯(lián)網(wǎng)技術(shù)的應(yīng)用,為整個社會發(fā)展轉(zhuǎn)型奠定了重要基礎(chǔ)。尤其是在大數(shù)據(jù)應(yīng)用日益成熟的今天,完善構(gòu)建大數(shù)據(jù)分析平臺,結(jié)合大數(shù)據(jù)分析的具體功能屬性和應(yīng)用價值,從而實現(xiàn)企業(yè)經(jīng)營發(fā)展與大數(shù)據(jù)應(yīng)用的體系性融入。當然,想要用好大數(shù)據(jù)平臺,就必須了解大數(shù)據(jù)平臺有哪些應(yīng)用特征,同時也要了解其具體應(yīng)用要求和內(nèi)涵,從而適應(yīng)大數(shù)據(jù)時代特征,為企業(yè)發(fā)展提供科學(xué)決策。

1 大數(shù)據(jù)時代特征分析

大數(shù)據(jù)時代的到來,標志著人類對計算機互聯(lián)網(wǎng)技術(shù)的應(yīng)用實現(xiàn)了實質(zhì)性進步,與以往時代所不同的是,大數(shù)據(jù)時代具有自身特征,其主要表現(xiàn)為:首先,其整體數(shù)據(jù)量極大,與以往信息時代不同的是,大數(shù)據(jù)應(yīng)用的前提就是收集龐大的數(shù)據(jù)信息,因此,其存儲數(shù)據(jù)的計算量遠超過了當前的計量,其基本上使用的都是P/E/Z做計量單位,起碼存儲在1000T以上,甚至高達10億T。

其次,其特征主要表現(xiàn)為種類繁多、內(nèi)容多樣。尤其是整個大數(shù)據(jù)體系中不僅包含了各個行業(yè)的信息,同時其收集形式也極為多樣,從文字、圖片到音頻、視頻等等,基本上囊括了整個時代的各個信息鏈條和內(nèi)涵。正是數(shù)據(jù)信息的多樣化和多元化決定了我們可以通過使用大數(shù)據(jù)實現(xiàn)對整個數(shù)據(jù)資源的體系化認知,同時這也從根本上提升了我們對數(shù)據(jù)的處理和應(yīng)用能力,使得整個數(shù)據(jù)分析更有參考價值和意義。

此外,隨著當前大數(shù)據(jù)應(yīng)用不斷成熟,如今數(shù)據(jù)價值密度相對較低,尤其是在物聯(lián)網(wǎng)廣泛應(yīng)用影響下,信息感知應(yīng)用極為廣泛。雖然當前大數(shù)據(jù)時代,整個數(shù)據(jù)量大,但是有價值的數(shù)據(jù)較少,其整體價值密度不大,因此如何才能有效完善數(shù)據(jù)篩選,優(yōu)化其價值應(yīng)用,就是當前利用大數(shù)據(jù)平臺過程中所不可忽視的內(nèi)容。

最后,我們應(yīng)該認識到大數(shù)據(jù)時代的重要特征還表現(xiàn)為數(shù)據(jù)處理深度快,且對數(shù)據(jù)處理有較高的時效性要求。正是高速的數(shù)據(jù)處理速度和處理時間要求,決定了當前大數(shù)據(jù)開發(fā)應(yīng)用不同于傳統(tǒng)數(shù)據(jù)篩選應(yīng)用。但是我們應(yīng)該辯證看待大數(shù)據(jù)平臺的優(yōu)缺點,尤其是當前我們所具備的技術(shù)和設(shè)施已經(jīng)無法滿足海量信息數(shù)據(jù)的處理,可以說正是快速發(fā)展的時代要求決定了我們必須優(yōu)化信息數(shù)據(jù)利用方式,構(gòu)建完善的數(shù)據(jù)應(yīng)用平臺和機制。

2 當前大數(shù)據(jù)分析平臺應(yīng)用內(nèi)涵及具體狀況分析

想要對大數(shù)據(jù)分析平臺應(yīng)用要求進行體系化認知,就必須清楚大數(shù)據(jù)分析的定義內(nèi)涵、應(yīng)用過程中存在的問題和不足以及其具體的解決對策。只有對其形成體系化了解,才能從根本上服務(wù)大數(shù)據(jù)分析平臺建設(shè)、應(yīng)用。

2.1 大數(shù)據(jù)分析的定義

結(jié)合大數(shù)據(jù)結(jié)構(gòu)復(fù)雜,數(shù)據(jù)更新速度快、價值密度低、整體數(shù)據(jù)量大等一系列特點,當前我們在應(yīng)用大數(shù)據(jù)時,存在較大難度,而全面應(yīng)用大數(shù)據(jù)的關(guān)鍵就是實施大數(shù)據(jù)分析,通過完善大數(shù)據(jù)分析的具體定義認知,從而構(gòu)建合理的大數(shù)據(jù)分析平臺。實際上,大數(shù)據(jù)分析指的是在數(shù)據(jù)密集的環(huán)境下,通過使用科學(xué)分析的方法,對數(shù)據(jù)應(yīng)用進行重新思考,并完善構(gòu)建全新數(shù)據(jù)分析應(yīng)用模式。大數(shù)據(jù)分析認為其分析應(yīng)用過程并非技術(shù)上的應(yīng)用,而是一種具體的使用策略,其核心內(nèi)涵指的是通過使用一種相對以往更有效分析方式來管理、獲取海量數(shù)據(jù)的方式,并且在這一過程中獲取有價值的信息。結(jié)合當前大數(shù)據(jù)應(yīng)用實際狀況,我們可以認為,大數(shù)據(jù)分析指的是:依據(jù)數(shù)據(jù)生成理論,通過構(gòu)建大數(shù)據(jù)分析模型,從而結(jié)合集成化大數(shù)據(jù)分析平臺,使用云計算技術(shù)完善分析數(shù)據(jù)資源,并且最終探究出大數(shù)據(jù)模式背后規(guī)律的過程。

2.2 大數(shù)據(jù)分析方法闡述

目前大數(shù)據(jù)分析的重要內(nèi)容是可視化分析,通過集成交互可視化和自動化分析,從而提升大數(shù)據(jù)分析方法的應(yīng)用效果。從大數(shù)據(jù)分析系統(tǒng)架構(gòu)層面看,整個大數(shù)據(jù)分析具有9層架構(gòu)體系,尤其是其中的復(fù)雜結(jié)構(gòu)處理技術(shù)、平臺應(yīng)用標準規(guī)范和虛擬化接入技術(shù)以及其知識服務(wù)交易模型和大數(shù)據(jù)知識服務(wù)質(zhì)量評價體系等共同組成了大數(shù)據(jù)分析服務(wù)的關(guān)鍵技術(shù)應(yīng)用機制。在傳統(tǒng)數(shù)據(jù)分析過程中,其更多針對的是原始數(shù)據(jù)進行抽樣、過濾,并結(jié)合數(shù)據(jù)樣本分析,從而探究其中存在的具體規(guī)律和特點。因此,其中最重要的特點在于通過使用復(fù)雜算法能夠從體系化的數(shù)據(jù)中尋找到更多有價值的數(shù)據(jù)信息。在當前計算水平和存儲能力大大提升過程中,大數(shù)據(jù)分析所面臨的對象是整個動態(tài)變化的數(shù)據(jù)群體,而不是客觀不變的數(shù)據(jù)樣本,因此其大數(shù)據(jù)分析的應(yīng)用重點從高效解決收集到的信息入手,只有提升數(shù)據(jù)運算的準確性,才能夠沒滿足大數(shù)據(jù)分析的應(yīng)用要求。

2.3 大數(shù)據(jù)分析過程中存在的問題闡述

正是因為當前大數(shù)據(jù)時代的迅猛發(fā)展,整個大數(shù)據(jù)分析過程中存在著一系列問題和不足,其大大制約了大數(shù)據(jù)分析的應(yīng)用效果,其問題集中反映為:首先,想要實現(xiàn)精準的大數(shù)據(jù)分析,需要解決其大數(shù)據(jù)存儲問題,與以往相比,大數(shù)據(jù)時代,其整體數(shù)據(jù)存儲遠遠超過了傳統(tǒng)數(shù)據(jù)時代,而想要實現(xiàn)其數(shù)據(jù)分析目的,就必須完善數(shù)據(jù)存儲。而目前在大數(shù)據(jù)時代,整個數(shù)據(jù)存儲并不是靜態(tài)的,而是動態(tài)發(fā)展的,因此只有探索完善適應(yīng)大數(shù)據(jù)存儲的具體機制,才能實現(xiàn)其最終目的。其次,大數(shù)據(jù)質(zhì)量不高,分析利用難度大。因此,需要探究增強數(shù)據(jù)可用性的方法。此外,大數(shù)據(jù)分析的核心在與數(shù)據(jù)建模。但是當前由于建模水平較差,暫時很難結(jié)合大數(shù)據(jù)時代特征,完善建模應(yīng)用。最后,缺乏專業(yè)的大數(shù)據(jù)分析工具。在傳統(tǒng)數(shù)據(jù)分析過程中,經(jīng)常使用SPSS等軟件進行數(shù)據(jù)分析,但是在大數(shù)據(jù)時代,缺乏能夠完善有效的數(shù)據(jù)分析工具。因此,結(jié)合大數(shù)據(jù)時代特征,構(gòu)建大數(shù)據(jù)分析平臺,對于整個大數(shù)據(jù)時代應(yīng)用發(fā)展來說,極為必要。

3 構(gòu)建研發(fā)大數(shù)據(jù)分析平臺的具體策略

在大數(shù)據(jù)分析過程中,最需要探究的就是其分析方法。分析方法的好壞直接關(guān)系到大數(shù)據(jù)分析應(yīng)用的具體結(jié)果是否合理有效,同時也關(guān)系到其數(shù)據(jù)分析結(jié)果是否切實有用。而不同類型的大數(shù)據(jù)則需要截然不同的分析方法。而在構(gòu)建大數(shù)據(jù)分析平臺過程中,需要從以下方面入手:

首先,要結(jié)合大數(shù)據(jù)分析應(yīng)用的具體要求,完善數(shù)據(jù)存儲技術(shù)。當前增速驚人的大數(shù)據(jù)決定了我們想要實現(xiàn)大數(shù)據(jù)分析目的,就必須探索完善的數(shù)據(jù)存儲方式。通過應(yīng)用云存儲技術(shù),能夠確保其存儲容量以及數(shù)據(jù)整體的可用性和安全性等等,從而解決大數(shù)據(jù)分析平臺的數(shù)據(jù)存儲問題。而通過提升大數(shù)據(jù)分析存儲技術(shù),必然也能夠有效提升其具體應(yīng)用技術(shù)。同時優(yōu)化數(shù)據(jù)存儲,能夠有效提升大數(shù)據(jù)的應(yīng)用效果,實現(xiàn)大數(shù)據(jù)分析的良好效果。

其次,大數(shù)據(jù)分析是大數(shù)據(jù)應(yīng)用的核心,而實施大數(shù)據(jù)分析模式則需要針對當前類型多樣、迅速增長的信息數(shù)據(jù)進行分析,并且通過合理分析,從龐大的數(shù)據(jù)體系中尋找到有價值的信息內(nèi)涵,進而為整個決策活動提供相關(guān)依據(jù)的模式。在大數(shù)據(jù)分析過程中,數(shù)據(jù)庫、知識庫和模擬庫是整個數(shù)據(jù)分析模型構(gòu)建的主要要素,通過在構(gòu)建現(xiàn)有知識庫和數(shù)據(jù)庫模型基礎(chǔ)上,進行數(shù)據(jù)分析,其得到相應(yīng)結(jié)果,一方面優(yōu)化模型構(gòu)造,另一方面也實現(xiàn)對數(shù)據(jù)的具體應(yīng)用。通過優(yōu)化數(shù)據(jù)模型應(yīng)用,能夠有效提升大數(shù)據(jù)分析能力和應(yīng)用實效。

最后,大數(shù)據(jù)分析系統(tǒng)作為當前數(shù)據(jù)平臺應(yīng)用的核心,其主要應(yīng)用功能在于為數(shù)據(jù)挖掘應(yīng)用提供完善基礎(chǔ),同時使用分布式存儲法和并行計算體系,通過使用多重分布計算,從而實現(xiàn)對各類信息資源進行有效計算和分析,通過提供關(guān)聯(lián)、分類、預(yù)算等一系列方法,結(jié)合各種數(shù)據(jù)挖掘分析機制的應(yīng)用,從而實現(xiàn)整個大數(shù)據(jù)平臺價值效用的體系化發(fā)揮。

4 結(jié)語

在當前互聯(lián)網(wǎng)技術(shù)對各行各業(yè)發(fā)展的具體影響推動下,通過使用大數(shù)據(jù)技術(shù),能夠為各行業(yè)發(fā)展奠定重要基礎(chǔ),尤其是大數(shù)據(jù)分析的科學(xué)性,能夠為企業(yè)發(fā)展提供重要決策依據(jù)。而對各企業(yè)來說,尋找大數(shù)據(jù)應(yīng)用與企業(yè)自身經(jīng)營的結(jié)合點,則能夠從根本上提升大數(shù)據(jù)應(yīng)用效率。而想要構(gòu)建符合實際經(jīng)營需要的大數(shù)據(jù)分析平臺,就必須從大數(shù)據(jù)時代特征分析入手,通過具體了解和體系化融入,從而實現(xiàn)大數(shù)據(jù)分析平臺的具體研發(fā)。而構(gòu)建大數(shù)據(jù)分析平臺將從根本上發(fā)揮大數(shù)據(jù)技術(shù)優(yōu)勢。

參考文獻:

[1] 馬新莉.面向服務(wù)的大數(shù)據(jù)分析平臺解決方案[J].科技創(chuàng)業(yè),2013(10):72-74.

[2] 韓晶晶.大數(shù)據(jù)時代下數(shù)據(jù)分析理念的辨析[J].管理信息,2014(5):33-35.

篇2

關(guān)鍵詞:大數(shù)據(jù);統(tǒng)計學(xué);教學(xué)改革

中圖分類號:C829.29 文獻識別碼:A 文章編號:1001-828X(2015)024-000-01

一、引言

最早提出“大數(shù)據(jù)”時代到來的是全球知名咨詢公司麥肯錫,現(xiàn)在的社會是一個高速發(fā)展的社會,科技發(fā)達,信息流通,人們之間的交流越來越密切,生活也越來越方便,大數(shù)據(jù)就是這個高科技時代的產(chǎn)物。大數(shù)據(jù)具有以下的鮮明特點:第一個特征是數(shù)據(jù)量大。第二個特征是數(shù)據(jù)類型繁多,多類型的數(shù)據(jù)對數(shù)據(jù)的處理能力提出了更高的要求。第三個特征是數(shù)據(jù)價值密度相對較低,如何通過強大的機器算法更迅速地完成數(shù)據(jù)的價值“提純”,是大數(shù)據(jù)時代亟待解決的難題。第四個特征是處理速度快,時效性要求高,這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘最顯著的特征。

統(tǒng)計學(xué)專業(yè)是與數(shù)據(jù)分析處理聯(lián)系最為緊密的學(xué)科之一。大數(shù)據(jù)時代的到來不僅為統(tǒng)計學(xué)專業(yè)的發(fā)展帶來的前所未有的機遇,同時也帶來了巨大挑戰(zhàn)。傳統(tǒng)的統(tǒng)計學(xué)專業(yè)已不再適應(yīng)大數(shù)據(jù)時代的信息爆發(fā)式增長的要求,這就要求我們應(yīng)該對統(tǒng)計學(xué)專業(yè)進行重新定位,并在此基礎(chǔ)上調(diào)整相關(guān)課程,改革傳統(tǒng)的教學(xué)手段以及完善教學(xué)評價體系,以適應(yīng)大數(shù)據(jù)時代的到來。

二、統(tǒng)計學(xué)專業(yè)改革的建議

(一)人才培養(yǎng)目標的重新定位

如果說以往的統(tǒng)計學(xué)專業(yè)是以培養(yǎng)簡單的“應(yīng)用型”人才為目標,那么隨著大數(shù)據(jù)時代的到來,社會不僅僅需要會應(yīng)用基礎(chǔ)統(tǒng)計知識處理相關(guān)領(lǐng)域的問題的單一的應(yīng)用型人才,而是對人才提出了更高的要求:大數(shù)據(jù)時代下的統(tǒng)計學(xué)專業(yè)的人才除了應(yīng)該具備基礎(chǔ)的數(shù)據(jù)收集,處理和分析的能力之外,還應(yīng)該了解相關(guān)應(yīng)用領(lǐng)域的背景知識,而且應(yīng)具備很強的自我學(xué)習能力,以適應(yīng)大數(shù)據(jù)時代數(shù)據(jù)量大,總類繁多,時效性高等發(fā)展特點。因此,統(tǒng)計學(xué)人才培養(yǎng)目標應(yīng)該重新作出調(diào)整,應(yīng)該以培養(yǎng)全新的“復(fù)合型”統(tǒng)計人才為新的目標。

(二)課程設(shè)置的調(diào)整

隨著人才培養(yǎng)目標的重新定位,隨之而來的就是應(yīng)該對不再適應(yīng)時展要求的課程進行必要的調(diào)整。

首先,大數(shù)據(jù)的分析和處理與以往的經(jīng)典分析方法有很大不同,以往的統(tǒng)計分析方法主要是建立在抽樣基礎(chǔ)之上,而大數(shù)據(jù)時代信息處理迅速,信息獲得途徑廣泛,而且信息價值密度低,這就要求數(shù)據(jù)處理時,可以以全體作為樣本,而不是進行抽樣;分析時必須考慮所有數(shù)據(jù)而不是剔除所謂的異常數(shù)據(jù)。因此,以往的經(jīng)典統(tǒng)計分析方法已不再適應(yīng)大數(shù)據(jù)的處理和分析,必須適當?shù)恼{(diào)整經(jīng)典分析方法的課程設(shè)置,增加新的適用于大數(shù)據(jù)分析的課程。

其次,隨著數(shù)據(jù)量的爆發(fā)式增長,所有的統(tǒng)計工作對計算機的依賴程度越來越高,這就要求統(tǒng)計學(xué)專業(yè)的學(xué)生不僅掌握統(tǒng)計學(xué)專業(yè)的基礎(chǔ)知識,同時應(yīng)該熟練掌握計算機專業(yè)知識相關(guān)知識,因此,在課程安排時,應(yīng)注意計算機相關(guān)課程的適當增加。

基于上述原因,可以考慮增加如下課程:機器學(xué)習,模擬算法,數(shù)據(jù)挖掘,R語言軟件分析等課程,同時適當降低傳統(tǒng)分析方法課程的學(xué)時比重。此外,為了使學(xué)生能夠?qū)ο嚓P(guān)應(yīng)用領(lǐng)域的背景知識有所了解,可適當增設(shè)與應(yīng)用領(lǐng)域相關(guān)的通識課程。

(三)教學(xué)模式與手段的創(chuàng)新

以往的教學(xué)模式,通常是以課堂教學(xué),掌握書本經(jīng)典理論為主。雖然,傳統(tǒng)教學(xué)手段有著學(xué)生理論基礎(chǔ)扎實等諸多優(yōu)點,但是同時也存才學(xué)生過于偏重理論知識的掌握,動手能力不足,理論與實踐脫節(jié)等缺點。隨著社會的發(fā)展,尤其統(tǒng)計學(xué)專業(yè)自身具有鮮明的應(yīng)用專業(yè)特點。只采用傳統(tǒng)的教學(xué)模式和手段顯然不再適合大數(shù)據(jù)時代的需要;同時,隨著大數(shù)據(jù)時代的到來,多媒體手段日益豐富多彩,為傳統(tǒng)教學(xué)的創(chuàng)新提供了必要的支持。因此,為了適應(yīng)大數(shù)據(jù)時代人才的要求,必須改革傳統(tǒng)的教學(xué)手段和模式,在傳統(tǒng)教學(xué)基礎(chǔ)上,加大實驗教學(xué)的比重,在傳統(tǒng)教學(xué)外,增加社會實踐環(huán)節(jié),引入微課慕課,翻轉(zhuǎn)課堂等全新教學(xué)模式,以提高學(xué)生的學(xué)習興趣,鍛煉學(xué)生理論應(yīng)用于實踐的能力,從而為以后使用大數(shù)據(jù)時代的工作打下堅實的基礎(chǔ)。

(四)教學(xué)評價體系的完善

傳統(tǒng)的教學(xué)評價體系,通常是采用書面考核的方式對學(xué)生的學(xué)習進行評價,隨著時代的發(fā)著,單純的筆試評價不足以衡量學(xué)生的全面能力,最后導(dǎo)致出現(xiàn)高分低能的情況的出現(xiàn)。

為了適應(yīng)大數(shù)據(jù)時代對人才多方面能力的需求,必須對傳統(tǒng)的考核評價體系做出適當?shù)恼{(diào)整,以評價學(xué)生的多方面能力,尤其是動手能力,學(xué)習能力和應(yīng)用相關(guān)理論處理實際問題的能力。具體可以采用多種考核方法相結(jié)合的方式。如:增加平時的考核力度,增加實踐項目的考核,通過布置適當?shù)捻椖空撐模捎么疝q的形式,以鍛煉學(xué)生適應(yīng)以后工作,獨立分析解決問題的能力。

此外,傳統(tǒng)教學(xué)評價體系通常是單方面的,只有對學(xué)生成績的評價,為了適應(yīng)大數(shù)據(jù)時代的到來,全面提高教學(xué)質(zhì)量,可采取雙向教學(xué)評價體系,如:增加學(xué)生對教學(xué)環(huán)節(jié)的評價體系。以及教師間同行間的評價體系等。

篇3

“用手機上網(wǎng),搜索簡單的四個漢字,可能就需要消耗60個15瓦燈泡的能量。數(shù)據(jù)的產(chǎn)生是需要用電的。在云時代,一個數(shù)據(jù)中心所要耗費的能量是驚人的。”這是記者在在日前召開的2013施耐德電氣云計算數(shù)據(jù)中心創(chuàng)新峰會上聽到的一個觀點,由此產(chǎn)生的一個問題擺在我們面前:云時代數(shù)據(jù)中心應(yīng)該如何進行能效管理?

能量的邏輯

施耐德電氣全球高級副總裁、APC大中華區(qū)總裁黃陳宏指出:“我們正處在一個‘大數(shù)據(jù)’引領(lǐng)的智慧科技時代?!焖倩?、‘大量化’和‘多樣化’作為‘大數(shù)據(jù)’的顯著特征,從部署速度的實時性,部署量級的規(guī)?;腿轿坏闹悄芑芾矸矫鎸?shù)據(jù)中心提出了新的要求。在如今這個以“澤”(Zettabytes)為衡量數(shù)據(jù)量的時代,隨著數(shù)據(jù)量的爆發(fā)式增長,大型、超大型數(shù)據(jù)中心的可擴展性也越來越受到關(guān)注?!?/p>

有數(shù)據(jù)顯示,在2013年,全球有50%的數(shù)據(jù)中心邁向云計算。云時代大數(shù)據(jù)的特征,也使得未來數(shù)據(jù)中心的規(guī)模過去不可同日而語。施耐德電氣IT事業(yè)部大中華區(qū)副總裁、數(shù)據(jù)中心業(yè)務(wù)總經(jīng)理曲穎告訴我們,過去一個銀行的數(shù)據(jù)中心約在500到幾千平方米左右,但是現(xiàn)在,“我們接觸到的越來越多的銀行,都在規(guī)劃建設(shè)5000到20000平方米的數(shù)據(jù)中心。據(jù)統(tǒng)計,一個20000平方米的數(shù)據(jù)中心,一年需要耗費20兆瓦的電量?,F(xiàn)在有越來越多的萬米數(shù)據(jù)中心建設(shè)在中國的北方地區(qū),比如,這是一個應(yīng)時而生的變化?!?/p>

對于整個行業(yè)而言,如何在云時代數(shù)據(jù)中心的規(guī)劃設(shè)計、建設(shè)運行中更多地節(jié)約能效,積極地面對能源的消耗和碳排放的控制,對于這些數(shù)據(jù)中心的所有者而言,既是一個未來發(fā)展的趨勢,也會是要面對的一個巨大挑戰(zhàn)。

一個大型數(shù)據(jù)中心在規(guī)劃建設(shè)之始,居然也要“看風水”。在北京建數(shù)據(jù)中心,東北風和西北風吹來的方向,決定了數(shù)據(jù)中心窗戶的朝向。因為要對一個數(shù)據(jù)中心進行能效管理的話,首先就要盡可能地利用自然冷卻,以減少空調(diào)所帶來的耗電量。所謂“風水”,就是在規(guī)劃數(shù)據(jù)中心之初,把是否能夠最大程度利用地理條件帶來的便利放在首要位置上考慮。

曲穎說:“在數(shù)據(jù)中心里,我們不講節(jié)能,而講能效。因為能量是有邏輯的,當我們把能源的邏輯理順,能源效率得到提高后,不僅達到了節(jié)能的目的,還使數(shù)據(jù)中心變得更可靠、更優(yōu)化了?!?/p>

數(shù)據(jù)中心基因的作用

大數(shù)據(jù)時代,數(shù)據(jù)庫的內(nèi)容不僅海量,而且結(jié)構(gòu)也發(fā)生了極大變化。大量非結(jié)構(gòu)化數(shù)據(jù)的涌入,不僅對數(shù)據(jù)中心基礎(chǔ)設(shè)施帶來壓力,也使數(shù)據(jù)中心管理平臺從“設(shè)備級監(jiān)控”、“被動級管理”、“主動級管理”、“自動化管理”逐步向“智能化管理”邁進。同時,數(shù)據(jù)中心的規(guī)模也在不斷地擴大,可能是幾千平米。但是現(xiàn)在,越來越多的數(shù)據(jù)中心已經(jīng)突破了一萬,甚至幾萬平方米。這在能效管理與建設(shè)規(guī)劃方面都提出了更高的要求。

黃陳宏進一步提出數(shù)據(jù)中心的“基因”一說,他認為數(shù)據(jù)中心擁有業(yè)務(wù)基因和技術(shù)基因,“要讓我們的數(shù)據(jù)中心能夠跟上云時代的發(fā)展,我們必需依靠數(shù)據(jù)中心的‘基因’?!?/p>

國內(nèi)的通信運營商在全國有幾萬,甚至幾十萬個規(guī)模不一的基站,如果要把這些基站進行智能化整合,應(yīng)該怎么做?

曲穎說:“這就要求我們對數(shù)據(jù)中心的‘基因’有著更深入的認識。如果將企業(yè)、或是一個智能機構(gòu)比作成是一個生命體,那么它的特點由其基因來決定。不同的基因有不同的特征使得數(shù)據(jù)中心有著不同的特質(zhì)。舉個例子,如何滿足客戶在兩周之內(nèi)要完成移入一萬片刀片服務(wù)器的要求,這就需要你能夠掌握數(shù)據(jù)中心的基因密碼,然后在此基礎(chǔ)上實現(xiàn)快速重組。通信企業(yè)在并購后,存在不同組織結(jié)構(gòu)下的IT設(shè)施如何進行更有效整合的問題。這對于數(shù)據(jù)中心的建設(shè)與運行,也是一個很大的課題。這個時候,只有充分了解掌握了這些IT設(shè)施的“基因”,并進行重組,才有可能達成目的,組合成一個全新模式。”

事實上,在數(shù)據(jù)中心的規(guī)劃、建設(shè)過程中,也無時不刻需要考慮到“基因”問題。在能效管理環(huán)節(jié),“基因”更是關(guān)鍵點。據(jù)了解,在北京上地的IBM數(shù)據(jù)中心項目中,施耐德通過重組基因的方式,復(fù)制優(yōu)質(zhì)基因,幫IBM實現(xiàn)了PUE從1.77下降到1.5以下,每年節(jié)約運行成本約100萬人民幣;位于北京經(jīng)濟技術(shù)開發(fā)區(qū)(BDA)的Telehouse北京數(shù)據(jù)中心,施耐德電氣可幫助其實現(xiàn)高達25%的節(jié)能目標,并達到Telehouse在中國大陸地區(qū)的最低PUE值,實現(xiàn)最高能效水平。

“經(jīng)過這樣優(yōu)化之后的數(shù)據(jù)中心,才有可能是最優(yōu)質(zhì)的、最賺錢的數(shù)據(jù)中心?!鼻f說。

軟件定義數(shù)據(jù)中心

在云時代,對數(shù)據(jù)中心的設(shè)計師建設(shè)、基礎(chǔ)設(shè)施的管理控制也有新要求,黃陳宏進一步提出:“由軟件來定義數(shù)據(jù)中心會是將來的一個必然趨勢?!?/p>

篇4

隨著我國互聯(lián)網(wǎng)的發(fā)展,云計算、物聯(lián)網(wǎng)已成為耳熟能詳?shù)脑~匯;但是對大多數(shù)人只是聽過這些詞匯但是卻不能理解他們的含義。大數(shù)據(jù)時代已成為一個不可阻擋的趨勢,對于圖書館服務(wù)行業(yè)來說是一種機遇也是一種挑戰(zhàn),圖書館行業(yè)的發(fā)展應(yīng)該主動面對這一現(xiàn)狀,應(yīng)該主動面對大數(shù)據(jù)時代所帶來的挑戰(zhàn),積極應(yīng)對。我們都知道現(xiàn)階段數(shù)據(jù)的發(fā)展以冪指數(shù)方程的趨勢發(fā)展,大數(shù)據(jù)時代將成為圖書館行業(yè)發(fā)展的核心,因為它支撐著圖書館在新時期下的發(fā)展。但是面對這一大數(shù)字時代帶來挑戰(zhàn),應(yīng)如何積極的面對,成為圖書館發(fā)展行業(yè)首要考慮的問題。本文主要針對這一問題進行討論,望能夠找到有效的解決方案,促進圖書館行業(yè)的發(fā)展。

1 什么是大數(shù)據(jù)時代

1.1 大數(shù)據(jù)時代的概念

對于很多人來說,大數(shù)據(jù)時代這一詞匯是很熟悉的,但是對于它的含義確是很陌生的。大數(shù)據(jù)時代其實很難用一個完整的定義,我們通常可解釋為:大數(shù)據(jù)(Big data)通常用來形容一個公司創(chuàng)造的大量非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫用于分析時會花費過多時間和金錢。大數(shù)據(jù)分析常和云計算聯(lián)系到一起,因為實時的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。從這大數(shù)據(jù)時代的解析我們能夠看到,大數(shù)據(jù)時代不是單單的一種技術(shù),但是各種信息的綜合體,是一個巨型的資料庫。

最早提出“大數(shù)據(jù)”這一詞匯的是一個全球知名咨詢公司麥肯錫,他表示到:數(shù)據(jù)已滲透到各個領(lǐng)域,成為促進社會發(fā)展的重要因素。面對這樣的形式,人們加以合理的利用海量的數(shù)據(jù)資源,將會把世界的發(fā)展推向一個新紀元。

1.2 大數(shù)據(jù)時代的特點

我們由大數(shù)據(jù)的概念很容易的了解到,它是一個多種數(shù)據(jù)庫的聚合體。有些人就根據(jù)大數(shù)據(jù)的概念將其特點歸結(jié)為一下三點:量大、多樣、實時,有人直接將這三點簡單的成為3V特征(三個特征的首字母都是V開頭,簡稱為3V)。但是我認為大數(shù)據(jù)時代的特點除了這三點外還其他的,諸如數(shù)據(jù)價值密度高、處理數(shù)據(jù)快的特點。因此大數(shù)據(jù)時代特點我們可以總結(jié)為:①數(shù)據(jù)量大,也就是說數(shù)據(jù)的體量大,對于體量的衡量我們已經(jīng)不能用傳統(tǒng)的衡量方式了。②種類的多樣性,大數(shù)據(jù)庫的種類包含眾多的行業(yè),多個領(lǐng)域,而且具有文本、圖像、影視等多種樣式,這一特點尤其適用于圖書館的發(fā)展;③更新速度快,也就是我們說的實時性,大數(shù)據(jù)的更新每時每刻都在發(fā)生,保證了數(shù)據(jù)的實時性。④數(shù)據(jù)的價值密度高,涉及到傳輸、決策、感知、控制開放式循環(huán)的大數(shù)據(jù),大量的不相關(guān)信息對未來發(fā)展模式和趨勢的可預(yù)測性分析起著至關(guān)重要的作用。⑤處理速度快,數(shù)據(jù)持續(xù)到達,數(shù)據(jù)分析要求實時處理而非批量式分析。

2 大數(shù)據(jù)時代下圖書館面臨的機遇與挑戰(zhàn)

我們由大數(shù)據(jù)時代的特點可知,隨著大數(shù)據(jù)時代的發(fā)展,處理速度和更新速度使得其利用價值在不斷地上升,在大時代數(shù)據(jù)對圖書館行業(yè)的發(fā)展有著很大的影響。

2.1 大數(shù)據(jù)時代下圖書館面臨著挑戰(zhàn)

在新的時代下要求圖書館服務(wù)行業(yè)要對其圖書館內(nèi)部資料有一個充分的了解,而且這種了解要緊緊跟隨著圖書館內(nèi)部資料的更新不斷改變。傳統(tǒng)的圖書館服務(wù)行業(yè)的特點就是人工管理占很大一部分,數(shù)據(jù)更新速度差,管理效率低下,比較浪費時間;由于人們對知識的渴望,圖書館的作用越來越大;圖書館場地的局限也是一個重要的問題;大數(shù)據(jù)時代的高效性、實時性是傳統(tǒng)的圖書館服務(wù)行業(yè)所不能比擬的,如何在大數(shù)據(jù)時代下更好的發(fā)展圖書館服務(wù)行業(yè)成為一個重要的問題。

2.2 大數(shù)據(jù)時代下圖書館面臨著機遇

其實在大數(shù)據(jù)時代下圖書館的發(fā)展,機遇與挑戰(zhàn)而言,機遇所占的比例不少于挑戰(zhàn)的比例。大數(shù)據(jù)時代下數(shù)據(jù)形式有多樣化、信息更新的實時性、快速的處理速度,大數(shù)據(jù)這些特點都將會促進者圖書館服務(wù)行業(yè)的發(fā)展,未來會成為圖書館服務(wù)行業(yè)發(fā)展的核心部分。

3 圖書館行業(yè)應(yīng)該如何應(yīng)對大數(shù)據(jù)時代下的影響

面對大數(shù)據(jù)時代下的機遇與挑戰(zhàn),圖書館服務(wù)不能坐以待斃,應(yīng)該積極的面對挑戰(zhàn),勇于創(chuàng)先,實現(xiàn)機遇利用率的最大化。

3.1 創(chuàng)新圖書館管理方式,提高圖書館的智能化管理水平

傳統(tǒng)圖書館管理模式已不能適應(yīng)快速發(fā)展的社會,對于圖書館的管理,我們應(yīng)該做到與時俱進。創(chuàng)新圖書館的管理方式是適應(yīng)社會發(fā)展的必然趨勢。我們可以充分利用大數(shù)據(jù)時代量大、快速、實時的特點,提高圖書館的智能化管理水平。數(shù)字化時代,文獻資源等進行數(shù)字化、語義化處理是圖書館進行數(shù)據(jù)處理的主要模式,在此基礎(chǔ)上借助網(wǎng)絡(luò)服務(wù),實現(xiàn)數(shù)據(jù)共享,從而最大程度滿足用戶需要。

大數(shù)據(jù)時代的到來可以快速的提升圖書館的服務(wù)水平,大數(shù)據(jù)可以以最快的速度更新圖書館的資源,并對資源進行分類,讓人們根據(jù)自己的喜好可以快速的篩選出所需要的種類,節(jié)約借書人時間的同時也減少了圖書館行業(yè)的壓力。

3.2 高度關(guān)注圖書館用戶數(shù)據(jù)和信息

為了迎接大數(shù)據(jù)時代下挑戰(zhàn),要提升圖書館服務(wù)質(zhì)量;我們首先要注重的就是用戶的需求。我們都知道大數(shù)據(jù)內(nèi)的資料很多,但不一定都是客戶們需要的資源。因此我們要做到盡可能的滿足用戶們的需求。

做好用戶們的需求我們就要做好以下幾點:①根據(jù)用戶們的網(wǎng)頁訪問數(shù)量,統(tǒng)計、整理出哪些資源是比較受歡迎的,對其M行大量的收集。②了解用戶的愛好和價值取向,根據(jù)其不同的喜好可以向不同的人群進行資料的推薦。

4 總結(jié)

在大數(shù)據(jù)時代下,雖然圖書館服務(wù)行業(yè)受到了很多的挑戰(zhàn),但是同時也遇到了很多的機遇,我們要相信,隨著圖書館服務(wù)行業(yè)的不斷發(fā)展和創(chuàng)新,一定能跟隨時代的潮流,為我們提供更優(yōu)質(zhì)的服務(wù)。

參考文獻

[1]韓翠峰.大數(shù)據(jù)時代圖書館的服務(wù)創(chuàng)新與發(fā)展[J].圖書館.2013(01)

篇5

關(guān)鍵詞: 數(shù)字音樂;傳播模型;大數(shù)據(jù);云存儲

0 引言

大數(shù)據(jù)時代的來臨極大地改變了整個人類社會,為我們的生活帶來了全方位的革新,包括傳播技術(shù)和模式。作為對傳播技術(shù)高度依賴的音樂產(chǎn)業(yè),是率先深受大數(shù)據(jù)時代傳播技術(shù)革命影響的領(lǐng)域之一。

音樂不僅是藝術(shù)品,也是在個層次受眾中廣泛傳播和消費的文化消費品。因此,音樂作為一種特殊形式的商品,有著巨大的市場需求空間。在社會發(fā)展的的不同歷史時期,隨著技術(shù)的發(fā)展,音樂承載形式一直在進化。事實上數(shù)字音樂并不是一個新興產(chǎn)物,其存在和發(fā)展已經(jīng)有幾十年了。但是,在大數(shù)據(jù)和云計算成為主流信息處理技術(shù)的新時代,數(shù)字音樂的傳播亟待新的傳播模型。

1 大數(shù)據(jù)的特征

大數(shù)據(jù)首先意味著數(shù)據(jù)量極為龐大。2011年5月麥肯錫全球研究中心將“大數(shù)據(jù)”定義為“數(shù)據(jù)的量超過典型數(shù)據(jù)庫軟件工具擷取、存儲、管理和分析能力的數(shù)據(jù)”。這個定義還不夠全面。更準確的說,大數(shù)據(jù)意味著從各個方面全方位盡可能多的收集不同的變量,用以描述人、事、物以及現(xiàn)象的各種特征。面對不斷增長的記錄這些變量的需要,擷取數(shù)據(jù)的數(shù)量也相應(yīng)的快速增長,因此數(shù)據(jù)庫容量越來越大,最終接近無限大。處理如此海量的數(shù)據(jù)需要新技術(shù)和模型進行存儲、計算和傳輸,從而帶給我們很多意想不到的應(yīng)用。大數(shù)據(jù)的主要特征可概括為:①海量與數(shù)字化:所有的數(shù)據(jù)均以數(shù)字化的形式存在。(姚遠,2013)。②云存儲:通俗地說,云存儲是指通過網(wǎng)絡(luò)技術(shù)將數(shù)據(jù)存放在遠端虛擬空間中。③基于數(shù)據(jù)總體的計算:傳統(tǒng)統(tǒng)計學(xué)通常采用抽樣統(tǒng)計的方法。而在大數(shù)據(jù)時代,我們是通過分析與話題相關(guān)的全部已有數(shù)據(jù)來分析事物之間的聯(lián)系。④智能應(yīng)用:當數(shù)據(jù)總量大到一定程度時,隱藏在數(shù)據(jù)背后的事物的其他特征就會顯現(xiàn)出來,就可以發(fā)現(xiàn)事物之間更多的聯(lián)系。這些發(fā)現(xiàn)可以衍生許多智能應(yīng)用。

2 數(shù)字音樂的數(shù)據(jù)化與云存儲

數(shù)字化并不意味著數(shù)據(jù)化。將一個對象數(shù)據(jù)化就是將其置身于量化形式,可以制成表格并加以分析。這與數(shù)字化大相徑庭,數(shù)字化僅僅是將相似信息進行二進制編碼處理供計算機處理。

從二十世紀九十年代起,人們就開始用數(shù)字化的形式記錄和傳播音樂作品(馮毅,2008)。但在大數(shù)據(jù)時代,僅靠對音樂內(nèi)容的數(shù)字化處理方式遠遠不能滿足有效的傳播音樂需求,還需要更加便于管理和計算的傳播方式,即數(shù)據(jù)化。

采用知識本體論方法將音樂作品數(shù)據(jù)化不失為一種行之有效的方法。我們在之前的研究中已經(jīng)構(gòu)建了音樂領(lǐng)域知識本體,其中定義了5個子本體描述上級概念結(jié)構(gòu),分別是音樂事件、音樂作品、音樂人物、音樂地點、音樂技術(shù)。在這些子知識本體中,通過定義子類的概念、特征以及各類別和實例之間的關(guān)系,我們建立了一個完整的系統(tǒng)描述音樂的各項特征。(楊立,2011)

作為新型的網(wǎng)絡(luò)個人應(yīng)用,一些數(shù)據(jù)服務(wù)供應(yīng)商開始提供音樂云服務(wù)。數(shù)據(jù)服務(wù)提供商提供設(shè)備和服務(wù),允許用戶建立個人音樂庫,在設(shè)備間同步更新音樂和向臺式電腦、筆記本、平板、智能手機和其他的數(shù)碼播放器等傳遞音樂。

這些音樂云偏向于私有云,主要針對個人客戶。這種云存儲模式對于數(shù)字音樂傳播的有效性還遠遠不夠。我們需要一個更加開放的平臺和機制,允許所有在傳播鏈上的參與者都能在版權(quán)法的保護下合法地分享他們的作品、產(chǎn)品和服務(wù)。

3 數(shù)字音樂傳播鏈上的參與者

這里所說的參與者指的是在數(shù)字音樂傳播鏈涉及的所有的個人或組織。他們共同組成了如下傳播鏈:音樂制作者指音樂作品內(nèi)容最初的創(chuàng)作者,包括作曲家、歌詞作者和表演者。音樂要想突破時間和空間的限制進行傳播,首先就需要將音樂記錄下來進行處理,因此我們需要音樂內(nèi)容處理者,包括:錄音棚、演出機構(gòu)和數(shù)據(jù)處理商。數(shù)字音樂內(nèi)容供應(yīng)商擁有自己特殊的傳播渠道或者營銷網(wǎng)絡(luò),通常和網(wǎng)絡(luò)運營商或云服務(wù)提供商關(guān)系密切。他們提供在線數(shù)字音樂交易平臺,在數(shù)字音樂的傳播發(fā)揮著重要作用。此外,還需要云服務(wù)提供商提供包括存儲、搜索、上傳、分享,甚至是交易的公有或者私有數(shù)字音樂云服務(wù)。除此之外,還需要網(wǎng)絡(luò)運營商為傳播鏈上所有參與者提供網(wǎng)絡(luò)連接服務(wù)。數(shù)字音樂可預(yù)裝載諸如MP3播放器、手機等設(shè)備中捆綁式銷售,因此這些相關(guān)硬件生產(chǎn)商也與數(shù)字音樂傳播直接相關(guān)。傳播鏈的終端端是數(shù)字音樂消費者,包括個人消費者、公眾媒體和娛樂行業(yè)。

4 數(shù)字音樂傳播模型

數(shù)字音樂傳播涉及三個層次,分別是制作層、存儲層和交易服務(wù)層。如圖2所示。

①制作層:制作層描述數(shù)字音樂作品由最初創(chuàng)作到最終數(shù)據(jù)化的過程。②存儲層:為了更為便利和有效的傳播,數(shù)字音樂作品基本儲存在云端。經(jīng)過第一層次的數(shù)據(jù)化過程,數(shù)字音樂實現(xiàn)轉(zhuǎn)化,儲存在不同的云端中。③交易服務(wù)層,即為用戶服務(wù)層,數(shù)字音樂交易發(fā)生在該層次。該層次可為電子商務(wù)平臺,在符合版權(quán)保護的前提下,允許混合電子商務(wù)模型B2C,C2C,B2B和O2O等。

5 結(jié)語

數(shù)字音樂作為一種特殊的信息產(chǎn)品,消費十分廣泛。不同與實物產(chǎn)品和虛擬產(chǎn)品,數(shù)字音樂介于兩者之間。音樂創(chuàng)作過程是物理過程,但是最終制作和傳播可以徹底數(shù)字化。一個適合的傳播模型對整個產(chǎn)業(yè)的發(fā)展是大有裨益的,值得深入研究。限于篇幅,本文呈現(xiàn)的模型僅僅是一個框架,更多細節(jié)問題,比如技術(shù)、運作策略以及產(chǎn)業(yè)鏈等有待將進一步深入研究。

參考文獻:

[1]馮毅.音樂的革命:從電子音樂到數(shù)字音樂[J].藝術(shù)評論,2008,10:59,70-74.

篇6

關(guān)鍵詞:大數(shù)據(jù)時代;大學(xué)英語聽力教學(xué);教學(xué)改革

一、引言

當前,在全球信息化快速發(fā)展的大背景下,信息技術(shù)對教育的革命性影響日趨顯著,教育大數(shù)據(jù)的研究和應(yīng)用已經(jīng)引起我國政府的高度重視。國務(wù)院2015年8月印發(fā)《促進大數(shù)據(jù)發(fā)展行動綱要》(國發(fā)〔2015〕50號),指出:“探索發(fā)揮大數(shù)據(jù)對變革教育方式、促進教育公平、提升教育質(zhì)量的支撐作用。”[1]教育部2016年6月印發(fā)《教育信息化“十三五”規(guī)劃》(教技[2016]2號),強調(diào):“積極發(fā)揮教育大數(shù)據(jù)在教育管理平臺建設(shè)和學(xué)習空間應(yīng)用等方面的重要作用。”[2]這表明推動大數(shù)據(jù)在教育中的改革,已經(jīng)納入國家的發(fā)展戰(zhàn)略,對大學(xué)英語聽力教學(xué)的改革具有重大的影響。

二、大數(shù)據(jù)時代的背景

“大數(shù)據(jù)時代”概念由一家咨詢公司麥肯錫提出,“大數(shù)據(jù)”主要體現(xiàn)在數(shù)據(jù)已經(jīng)滲透到當今每一個業(yè)務(wù),每一個行業(yè),數(shù)據(jù)已經(jīng)成為一個行業(yè)甚至一個國家的重要因素。隨著互聯(lián)網(wǎng)和信息產(chǎn)業(yè)的不斷發(fā)展進步,海量的數(shù)據(jù)被挖掘和運用,它們構(gòu)成了“大數(shù)據(jù)時代”的要素,推動著人們的生活節(jié)奏和思維方式。大數(shù)據(jù)時代的特征可以用五個V來概括:更大的數(shù)據(jù)容量(Volume)、種類的多樣性(Variety)、更快的生成速度(Velocity)、更加分散的價值密度(Value)、可視化的呈現(xiàn)(Visualization)。[3]這些特征將給我們的社會生活及思維方式帶來重大的轉(zhuǎn)變,主要體現(xiàn)在三個方面:一是整體大于離散。海量數(shù)據(jù)總體的特性大于離散的特性;第二,混雜大于精確。大數(shù)據(jù)時代數(shù)據(jù)繁多,不能一味追求精確,要接受混雜,掌握事物總體的發(fā)展趨勢;最后的特性是,關(guān)聯(lián)大于因果。在大數(shù)據(jù)時代,事物之間的因果關(guān)系已不能再成為我們關(guān)注的唯一,而事物之間的相關(guān)關(guān)系才是我們最需要注重的方面。[4]在大數(shù)據(jù)時代海量數(shù)據(jù)流通且容易獲取的背景下,大學(xué)英語聽力教學(xué)有了一個新的平臺,如何正確地使用這個大平臺,促進教學(xué)改革?本文將從大數(shù)據(jù)的本質(zhì)和特點,結(jié)合大學(xué)英語聽力教學(xué)的現(xiàn)狀和不足,研究在這大數(shù)據(jù)時代,大學(xué)英語聽力教學(xué)應(yīng)該做出怎樣的變革。

三、大數(shù)據(jù)時代對傳統(tǒng)大學(xué)英語聽力教學(xué)的沖擊

(一)大學(xué)英語聽力教學(xué)的現(xiàn)狀

傳統(tǒng)的聽力教學(xué)模式是訓(xùn)練學(xué)生對一段英語反復(fù)、機械地訓(xùn)練,這種訓(xùn)練容易造成課程乏味,學(xué)習效率極低的情況。許多教師意識到這種不足,開始嘗試新的以學(xué)生為主體的教學(xué)模式。但這種模式對自制力差,不自信的學(xué)生存在不確定性,也不能保證每位學(xué)生都能在“聽”和“說”這兩項技能上得到有效的訓(xùn)練。同時這種模式也無法提供給學(xué)生課本以外的聽力資源和實踐機會,和隨時對學(xué)生的學(xué)習特征、學(xué)習時長及頻率、交互行為和作業(yè)情況等做出數(shù)據(jù)記錄、分析和反饋。而這些難以滿足的方面,正需要大數(shù)據(jù)時代的優(yōu)越性來補充。

(二)大學(xué)英語聽力教學(xué)資源的立體多元化轉(zhuǎn)變

傳統(tǒng)的大學(xué)英語聽力教學(xué),多傾向機械訓(xùn)練,不注重聽力資源的輸入多樣化。這種教學(xué)方式往往是事倍功半,學(xué)生的學(xué)習主動性和聽力理解應(yīng)用能力未得到顯著提高。大數(shù)據(jù)時代為英語聽力教學(xué)提供了豐富的學(xué)習資源,拓展學(xué)生們的視野,提高學(xué)生們對聽英語的積極性和對英語的興趣。[5]擁有一個海量數(shù)據(jù)的大數(shù)據(jù)庫能把數(shù)據(jù)、影音、圖像等資源巧妙地與英語聽力教學(xué)融合在一起,提高學(xué)生聽英語的積極性。大數(shù)據(jù)時代,大學(xué)英語聽力教學(xué)資源在不斷豐富,從只能從書本課堂學(xué)習固定資源到收聽國外紀錄片,人物訪談等英語國家本土聽力視頻。大數(shù)據(jù)把英語聽力教學(xué)與社會相結(jié)合,豐富拓展了學(xué)習手段和聽力材料。大數(shù)據(jù)時代里豐富有效的學(xué)習資源極大地沖擊變革著傳統(tǒng)英語聽力教學(xué)。

(三)慕課、微課、翻轉(zhuǎn)課堂對傳統(tǒng)課堂的沖擊

MOOC、微課、翻轉(zhuǎn)課堂是大數(shù)據(jù)變革教育的體現(xiàn),這些教學(xué)平臺利用海量數(shù)據(jù)將學(xué)生集合于一個課堂,其中師生間的互動,學(xué)生間的互動,學(xué)生與機器人的互動能更加頻繁、有效和高效。大數(shù)據(jù)時代高效技術(shù)手段支持下的多種教學(xué)平臺已經(jīng)有明顯的成效,且在大數(shù)據(jù)的教學(xué)平臺下,學(xué)生不但是這海量數(shù)據(jù)的使用者,還是這些數(shù)據(jù)的提供者。[6]筆者2017年對本校藝術(shù)加林學(xué)學(xué)院、公管學(xué)院、食品學(xué)院和人文學(xué)院的大一和大二學(xué)生共900人,分別進行了兩項問卷調(diào)查:1.教學(xué)者(你老師)是否經(jīng)常還是非⁄很少使用大數(shù)據(jù)支持多媒體教學(xué)?2.學(xué)習者(你自己)對大數(shù)據(jù)支持多媒體教學(xué)十分積極還是無所謂?共獲得852份有效數(shù)據(jù)。其中分析到兩組數(shù)據(jù):教學(xué)者使用兩種教學(xué)模式的人數(shù)比例;以及英語學(xué)習者對兩種教學(xué)模式的學(xué)習積極性比較,如表一和表二所示。表一:共852份有效數(shù)據(jù)中,反映教學(xué)者經(jīng)常使用大數(shù)據(jù)支持多媒體教學(xué)的學(xué)習者為604人,約占70.90%,反映教學(xué)者非或很少使用大數(shù)據(jù)支持多媒體教學(xué)的學(xué)習者為248人,約占29.10%。問卷表明:當前英語教學(xué)中,非或較少使用大數(shù)據(jù)支持多媒體教學(xué)的教學(xué)者還占有一定比例。表二:學(xué)習者在兩種教學(xué)模式下的積極性明顯不同。針對經(jīng)常使用大數(shù)據(jù)支持多媒體教學(xué),十分積極的學(xué)習態(tài)度人數(shù)明顯高于無所謂的學(xué)習態(tài)度人數(shù);針對非或很少使用大數(shù)據(jù)支持多媒體教學(xué),除去不接受的學(xué)習者750人,102名學(xué)習者中十分積極的學(xué)習態(tài)度人數(shù)明顯低于無所謂的學(xué)習態(tài)度人數(shù)。可以看出:學(xué)生們對于更新鮮、更具活力的大數(shù)據(jù)支持教學(xué)模式具有更大的興趣與學(xué)習動力。以上數(shù)據(jù)表明:大數(shù)據(jù)支持下,融合數(shù)據(jù)、影音圖像等資源的線上立體化,多媒體教學(xué)無疑能為老師和學(xué)生帶來更多的幫助與新鮮感。因此,推動大數(shù)據(jù)支持下的先進有活力的教學(xué)方式是大學(xué)英語教學(xué)改革所要注重的部分。

(四)英語聽力教學(xué)手段的多元化轉(zhuǎn)變

傳統(tǒng)聽力教學(xué)中,兩周一次的聽力短時訓(xùn)練遠不能提高學(xué)生的聽說應(yīng)用能力。隨著大數(shù)據(jù)時代的推進,學(xué)生學(xué)習英語的手段和工具日益多元化。除了登陸英語聽力學(xué)習平臺和網(wǎng)站外,各種智能手機、平板電腦等移動設(shè)備的普及,實現(xiàn)了學(xué)生們能在移動終端上,結(jié)合老師指導(dǎo),在各種學(xué)習軟件上隨時隨地進行英語聽力訓(xùn)練,這種多元化的聽力教學(xué)手段也成為大數(shù)據(jù)時代下的一大特色。比較常見的聽力學(xué)習軟件有“可可英語”“VOA每日英語”“每日英語聽力”等。大數(shù)據(jù)時代,老師可以借助這些大數(shù)據(jù)平臺進行網(wǎng)上教學(xué),使英語聽力學(xué)習不再局限于課堂,學(xué)習的時間和空間更加靈活多變。

四、大數(shù)據(jù)時代下大學(xué)英語聽力教學(xué)改革的幾點對策

(一)構(gòu)建英語聽力訓(xùn)練平臺和英語聽力評估系統(tǒng)

大數(shù)據(jù)時代海量數(shù)據(jù)的記錄及分析能將大學(xué)英語聽力教學(xué)與各方數(shù)據(jù)信息相互結(jié)合起來。為提高學(xué)生們的學(xué)習效率和積極性,需要構(gòu)建一個隨時隨地訓(xùn)練學(xué)生聽說的平臺,和一個能夠為之提供評估測定的系統(tǒng)。一個完善的英語聽力訓(xùn)練平臺,不但要有大量的英語聽力素材,更需要提供學(xué)生模擬場景訓(xùn)練,比如開發(fā)學(xué)生與英語國家朋友進行網(wǎng)上口語聊天的軟件平臺,讓學(xué)生們能更切實地運用所學(xué)知識,從實踐中獲得聽說交際能力的提高。還需構(gòu)建一個完善的評估系統(tǒng),對學(xué)生的不足之處及時反饋建議。

(二)提高教師信息技術(shù)能力

在信息不斷更新,不斷填充的大數(shù)據(jù)時代,世界的變化速度之快超乎想象。這一大背景下,更需要教師們提高自身的信息技術(shù)能力,學(xué)習掌握基本的數(shù)據(jù)分析和統(tǒng)計軟件,如Excel、SPSS、Clementine、Visio和SwiffChart軟件等,以更好地記錄分析學(xué)生學(xué)習行為和特征,適時進行學(xué)生英語聽力能力評估和反饋。教師在教學(xué)過程中也應(yīng)充分挖掘大數(shù)據(jù)平臺上學(xué)生感興趣的題材和內(nèi)容數(shù)據(jù),及時提供給學(xué)生融合社會熱點的學(xué)習資源,掃清聽力材料中的背景知識障礙。教師們還可以利用這些軟件對學(xué)生學(xué)習過程的記錄進行分析,及時調(diào)整教學(xué)模式,進一步完善大學(xué)英語聽力教學(xué)系統(tǒng)。

五、結(jié)束語

綜上所述,大數(shù)據(jù)時代的豐富資源和海量學(xué)習平臺全面地改變著大學(xué)英語聽力教學(xué)的學(xué)習手段和教學(xué)方式。大數(shù)據(jù)時代要求聽力教學(xué)改革應(yīng)該是數(shù)據(jù)驅(qū)動教學(xué),促進大學(xué)英語聽力教學(xué)手段平臺多樣化,教學(xué)資源多元信息化,提高教師信息技術(shù)能力。正因如此,我們需要利用好大數(shù)據(jù)時代的特點,利用這些海量的數(shù)據(jù),完善大學(xué)英語聽力教學(xué)的改革。

參考文獻:

[1]國務(wù)院關(guān)于印發(fā)《促進大數(shù)據(jù)發(fā)展行動綱要》的通知.

[2]教育部關(guān)于印發(fā)《教育信息化“十三五”規(guī)劃》的通知.

[3]維克托•邁爾——舍恩伯格,肯尼思•庫克耶.大數(shù)據(jù)時代——生活、工作與思維的大變革[M].周濤,譯.杭州:浙江人民出版社,2013:27-96.

[4]麥紅宇.大學(xué)英語聽力教學(xué)改革與定位[J].廣西民族大學(xué)學(xué)報:哲學(xué)社會科學(xué)版,2009,(11):189-192.

篇7

關(guān)鍵詞:陳四樓煤礦;大數(shù)據(jù);安全管理

1大數(shù)據(jù)的概述

大數(shù)據(jù)是信息化建設(shè)發(fā)展到新高度的產(chǎn)物,是指無法在一定時間范圍內(nèi)用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據(jù)集合,是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。大數(shù)據(jù)具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價值密度低的特征。

2大數(shù)據(jù)在陳四樓煤礦應(yīng)用于安全管理中的策略研究

煤礦安全管理作為長期以來困擾煤炭行業(yè)安全高效發(fā)展的嚴峻課題,改革開放以來,雖然我國煤炭百萬噸死亡率已經(jīng)下降到0.083,但對比國外先進國家煤礦安全管理水平仍有不小差距。煤礦大數(shù)據(jù)技術(shù)的引入為持續(xù)推動礦井安全管理注入了強大動力,并且煤礦安全生產(chǎn)和安全管理過程中所積累的海量數(shù)據(jù)也與大數(shù)據(jù)特性有所交集。相比傳統(tǒng)的信息處理技術(shù)而言,大數(shù)據(jù)更符合當前信息時代數(shù)據(jù)爆炸的現(xiàn)狀。同時大數(shù)據(jù)強調(diào)數(shù)據(jù)的快速流轉(zhuǎn)與價值,提高對數(shù)據(jù)的“加工能力”,并在最短的時間內(nèi)通過“加工”實現(xiàn)海量數(shù)據(jù)的分析處理和增值,其客觀存在的依據(jù)是洞察力。隨著綜合信息化的高速發(fā)展,大數(shù)據(jù)勢必成為礦井豐富安全管理的重要手段,是推動煤炭行業(yè)安全發(fā)展的必然之舉。

3陳四樓煤礦安全管理現(xiàn)狀、信息數(shù)據(jù)特征

3.1礦井安全管理現(xiàn)狀

(1)近年來,礦井雖然加大了改革創(chuàng)新、先進生產(chǎn)力和自動化、智能化設(shè)備的引進力度,采掘工作面現(xiàn)場機械化、自動化和智能化生產(chǎn)水平不斷提升,且技術(shù)改造持續(xù)完善,但受開采深度不斷增加的影響,礦井重大致災(zāi)因素逐步凸顯且種類逐漸增多,同時作為煤與瓦斯突出礦井,受其生產(chǎn)本質(zhì)的制約,井下現(xiàn)場生產(chǎn)作業(yè)期間仍不能完全擺脫人工勞動強度大、作業(yè)環(huán)節(jié)較多、作業(yè)流程較復(fù)雜等不利因素。(2)對于煤礦安全生產(chǎn)事故,尤其是重特大傷亡事故是各煤礦企業(yè)談聲色變和不愿談及的家丑,其事故相關(guān)的寶貴經(jīng)驗和數(shù)據(jù)也是不愿自行共享的,且就目前煤礦安全事故分析仍偏向于事后分析,未能真正有效地實現(xiàn)超前預(yù)警、事前防控的最佳效果,導(dǎo)致安全管理效能未能完全得到釋放,與此同時全面有效且有深度的事故分析工具在煤礦中應(yīng)用較少。(3)陳四樓煤礦作為井工煤礦,開采深度較深,且作為煤與瓦斯突出礦井,采掘工作面受瓦斯賦存異常、地質(zhì)構(gòu)造條件、重大災(zāi)害和開采條件復(fù)雜等多方面不利因素的影響,同時現(xiàn)場安全生產(chǎn)較難控制。

3.2陳四樓煤礦信息數(shù)據(jù)特征

(1)信息數(shù)據(jù)體量大。礦井井下現(xiàn)場生產(chǎn)是動態(tài)變化、瞬息萬變的過程,期間所積累的大量數(shù)據(jù)體量是龐大而繁雜的,并且這些數(shù)據(jù)也都將作為礦井現(xiàn)場安全生產(chǎn)和日常安全動態(tài)管理重要數(shù)據(jù)。(2)信息數(shù)據(jù)多樣化。礦井生產(chǎn)過程是實時變化的,其現(xiàn)場各類傳感器及相關(guān)安全監(jiān)測監(jiān)控設(shè)備所采集和監(jiān)測到的數(shù)據(jù)也同步實時更新和變化,且圖像數(shù)據(jù)等半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)所占數(shù)據(jù)密度呈逐步增大趨勢。(3)信息數(shù)據(jù)價值密度低。礦井在用各類安全監(jiān)測監(jiān)控設(shè)備及傳感器在生產(chǎn)過程中能夠?qū)崿F(xiàn)實時同步運行,實時變化的過程中,持續(xù)不斷地傳輸和生成大量信息數(shù)據(jù),但所產(chǎn)生的這些數(shù)據(jù)和信息較從中獲取的知識成反比。(4)信息數(shù)據(jù)生成和增長速度快。礦井信息綜合化和自動化的聯(lián)合應(yīng)用,在安全生產(chǎn)過程中起到了至關(guān)重要的作用,也覆蓋了礦井瓦斯監(jiān)測等系統(tǒng),通過設(shè)備實時監(jiān)測產(chǎn)生的大量數(shù)據(jù),并能夠保持快速增長。

4大數(shù)據(jù)在陳四樓煤礦安全管理中的實施與研究

4.1大數(shù)據(jù)改變思路,全面提升安全理念

要有效解決礦井生產(chǎn)過程中繁雜生產(chǎn)系統(tǒng)所帶來的問題和出現(xiàn)的異常信息,就必須轉(zhuǎn)變思路,降低數(shù)據(jù)精確性需求,接受大數(shù)據(jù)時代下混雜而體量龐大的數(shù)據(jù),獲得更全面的信息數(shù)據(jù),降低人為主觀意識失誤,從而指導(dǎo)礦井重大安全決策。

4.2大數(shù)據(jù)超前監(jiān)視設(shè)備運行,提高設(shè)備運行可靠性

以往煤礦設(shè)備管理理念大都是“事后管理”,即在設(shè)備出現(xiàn)故障后進行應(yīng)急性搶修,這種應(yīng)急狀態(tài)下的設(shè)備搶修既影響正規(guī)作業(yè)循環(huán)也給設(shè)備搶修過程中人的不安全行為、物的不安全狀態(tài)等方面帶來安全風險,埋下安全隱患。大數(shù)據(jù)為消除此風險隱患提供了堅實的基礎(chǔ)和保障。通過大量數(shù)據(jù)的收集,并進行合理化分析、對比,并結(jié)合現(xiàn)場生產(chǎn)實際情況,實現(xiàn)超前預(yù)判生產(chǎn)過程中存在的風險和即將產(chǎn)生隱患問題和異常信息,確保安排檢修人員在設(shè)備發(fā)生故障前進行調(diào)整和檢修維護,降低設(shè)備損耗、生產(chǎn)影響和風險隱患,提升設(shè)備安全管理水平。

4.3大數(shù)據(jù)技術(shù)建立事故分析新方向,實現(xiàn)“雙重預(yù)防”超前防范

運用大數(shù)據(jù)技術(shù)分析則更全面,通過收集國內(nèi)外煤礦提升運輸事故現(xiàn)場數(shù)據(jù),包括提升機與作業(yè)現(xiàn)場匹配、斜巷坡?lián)踉O(shè)施設(shè)計參數(shù)、現(xiàn)場作業(yè)環(huán)境等數(shù)據(jù)。運用大數(shù)據(jù)分析可以深度挖掘以上3個主要因素外的相關(guān)要素,設(shè)置提升運輸教學(xué)模型,指導(dǎo)礦井提升運輸安全生產(chǎn)。大數(shù)據(jù)分析技術(shù)能夠從更多方面考慮事故的預(yù)防舉措,真正實現(xiàn)“雙重預(yù)防”在安全管理中“防火墻”作用,具有深遠的意義。

4.4大數(shù)據(jù)強化技術(shù)認知,轉(zhuǎn)變管理思維

機械化、自動化、信息化和智能化建設(shè)是煤礦企業(yè)順應(yīng)時展的重要舉措,陳四樓煤礦經(jīng)過多年孜孜不倦的努力,礦井已與華為公司合作打造了F5G工業(yè)光環(huán)網(wǎng)技術(shù),并實施取得初步成效,使礦井實現(xiàn)了對環(huán)境、設(shè)備和人員狀態(tài)的實時感知;萬兆工業(yè)環(huán)網(wǎng)和F5G通信技術(shù)的應(yīng)用,讓礦井開通了信息傳輸?shù)母咚俟贰M瑫r基于大數(shù)據(jù)的智能應(yīng)用,積累了大量的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù),而這其中又以非結(jié)構(gòu)數(shù)據(jù)占主導(dǎo)地位。礦井安全生產(chǎn)管理人員必須轉(zhuǎn)變以往傳統(tǒng)和落后的管理思維,將抽樣分析向全樣本數(shù)據(jù)分析蛻變,相比抽樣分析而言,盡管在數(shù)據(jù)精確性上有所缺陷,但就數(shù)據(jù)分析情況而言卻全面增強,并且大數(shù)據(jù)能進一步發(fā)掘不同數(shù)據(jù)之間的關(guān)聯(lián)性,有效地捕捉傳統(tǒng)分析工具所被疏漏的細枝末節(jié),逐步降低煤礦安全管理過程中人為意識失誤。

5結(jié)束語

篇8

隨著科學(xué)技術(shù)的不斷發(fā)展,全世界已經(jīng)進入大數(shù)據(jù)時代,大數(shù)據(jù)的應(yīng)用給電力系統(tǒng)的運營帶來了極大的便利和優(yōu)勢,但是隨之而來的就是信息安全問題。本文主要介紹了電力大數(shù)據(jù)的應(yīng)用特征,電力大數(shù)據(jù)給企業(yè)帶來的好處以及存在的問題,同時詳細闡述了安全防護技術(shù)與管理方法,如何加強信息安全管理,加強安全防護工作,這樣才可以從根本上解決電力企業(yè)的信息安全問題。

【關(guān)鍵詞】

電力大數(shù)據(jù);信息安全;技術(shù)

1引言

大數(shù)據(jù)技術(shù)是未來信息社會發(fā)展的一個大方向,它為人類全面、深刻地認識世界、認識自身提供了新的方式、新視角,這在此前的時代是無法辦到的,大數(shù)據(jù)是未來技術(shù)發(fā)展的一片藍海。大量的數(shù)據(jù)處理無疑給現(xiàn)在的信息技術(shù)提出了新的挑戰(zhàn),而這一問題在信息化程度不斷提高的電力企業(yè)中同樣正在凸顯出來。隨著信息技術(shù)的推進和發(fā)展,電力企業(yè)的數(shù)據(jù)也會成爆炸式增長。大數(shù)據(jù)不是洪水猛獸,而是可供利用的信息資產(chǎn)。如何使用好大數(shù)據(jù),充分活化企業(yè)數(shù)據(jù)資產(chǎn),更好地服務(wù)電力事業(yè)發(fā)展和廣大電力客戶將成為擺在電力企業(yè)面前值得思考的課題。電力行業(yè)應(yīng)當在大力推廣信息化建設(shè)的同時,認識到數(shù)據(jù)背后的價值,搞好數(shù)據(jù)治理,并積極投入到數(shù)據(jù)挖掘與分析運用工作中,實踐大數(shù)據(jù)戰(zhàn)略,挖掘數(shù)據(jù)價值,為電力行業(yè)發(fā)、輸、配、變、用電各環(huán)節(jié)建設(shè),以及電力營銷等業(yè)務(wù)發(fā)展提供科學(xué)指導(dǎo),及有效解決方案,重視提升電力行業(yè)信息化系統(tǒng)輔助決策能力。

2電力大數(shù)據(jù)的應(yīng)用特征

大數(shù)據(jù)本身具有4個典型特征:容量巨大;數(shù)據(jù)類型多樣;價值密度低;處理速度快,對此業(yè)界已基本達成共識,但還沒有統(tǒng)一的定義。電力大數(shù)據(jù)的應(yīng)用主要是以業(yè)務(wù)應(yīng)用為主,實現(xiàn)面向典型業(yè)務(wù)場景的模式創(chuàng)新及應(yīng)用提升。電力大數(shù)據(jù)應(yīng)用于大規(guī)劃,主要是針對電網(wǎng)趨勢進行預(yù)測,通過用電量預(yù)測、空間負荷預(yù)測以及多項指標關(guān)聯(lián)分析,進行綜合分析,從而支持規(guī)劃設(shè)計;電力大數(shù)據(jù)應(yīng)用于大檢修,通過視頻監(jiān)測變電站,準確識別多種表計、刀閘、開關(guān)與隔離開關(guān)的位置、狀態(tài)或讀數(shù),利用大數(shù)據(jù)技術(shù),智能分析視頻數(shù)據(jù),從而代替?zhèn)鹘y(tǒng)的傳感器;電力大數(shù)據(jù)應(yīng)用于大運行,通過對電網(wǎng)調(diào)度的電網(wǎng)設(shè)備臺賬信息、設(shè)備拓撲信息、設(shè)備遙信遙測的相關(guān)信息的歷史時刻查詢,預(yù)測分析未來狀態(tài),為設(shè)備狀態(tài)管理提供完善建議,為電網(wǎng)調(diào)度提供輔助決策;電力大數(shù)據(jù)應(yīng)用于大營銷,拓展面向智能化、互動化的服務(wù)能力,面向用電信息采集、計量、收費和服務(wù)資源,開展用電互動服務(wù),實時反饋用電、購電信息,例如營銷微信平臺、營銷手機、營銷支付寶等。隨著居民用電信息采集的表記終端數(shù)量達到上億只,供電電壓自動采集接入電壓監(jiān)測點達到上萬個,輸變電狀態(tài)監(jiān)測裝置接入上萬個,監(jiān)測數(shù)據(jù)達到上千萬條,電力大數(shù)據(jù)的應(yīng)用也具有數(shù)據(jù)量大、數(shù)據(jù)類型多、實時性強等大數(shù)據(jù)的典型應(yīng)用特征。

3電力大數(shù)據(jù)給企業(yè)帶來的好處

電力大數(shù)據(jù)屬于一項綜合型數(shù)據(jù)信息,涵蓋了企業(yè)的生產(chǎn)、運營、銷售與服務(wù)等多個方面。大數(shù)據(jù)在電力企業(yè)的應(yīng)用,有效提高了企業(yè)工作效率,并科學(xué)判斷企業(yè)運營狀況和未來發(fā)展方向,從而制定并調(diào)整科學(xué)的營銷政策與方針,促進電力企業(yè)朝著正確的軌道運營與發(fā)展。正是因為高效率的決策、運營與服務(wù),降低了企業(yè)經(jīng)營成本。通過大數(shù)據(jù)的分析、監(jiān)測功能,企業(yè)建立起同客戶間的緊密聯(lián)系,實現(xiàn)了對客戶的在線服務(wù),全面提升了客戶服務(wù)水平,從而贏得了更廣闊的市場空間,為企業(yè)發(fā)展創(chuàng)造了預(yù)期的經(jīng)濟效益。

4電力大數(shù)據(jù)給信息安全帶來的風險

大數(shù)據(jù)背景下,信息數(shù)據(jù)的運行主要依賴于計算機網(wǎng)絡(luò)系統(tǒng),多方數(shù)據(jù)參與各方共享統(tǒng)一的互聯(lián)網(wǎng),勢必會帶來信息安全問題,這主要體現(xiàn)在:

4.1數(shù)據(jù)運行風險

大數(shù)據(jù)系統(tǒng)時刻需要承擔數(shù)據(jù)存儲、分析與處理等工作,需要管理者適時更新技術(shù),緩解數(shù)據(jù)處理的負擔。若技術(shù)更新不及時,就可能導(dǎo)致數(shù)據(jù)運行風險,如:數(shù)據(jù)丟失、信息失真等。其他的運行故障,如:軟硬件兼容性差、系統(tǒng)異常及管理人員操作失誤、設(shè)備更新不及時等也可能引發(fā)數(shù)據(jù)失真。

4.2黑客攻擊風險

黑客攻擊問題成為大數(shù)據(jù)時代信息安全的大問題,黑客攻擊通常是專業(yè)性較強、有組織、有預(yù)謀的攻擊,通過竊取大數(shù)據(jù)、非法獲得信息等來進行非法交易,其破壞性較大,甚至可能造成整個大數(shù)據(jù)系統(tǒng)的癱瘓,為電力企業(yè)帶來不可估量的經(jīng)濟損失。

4.3電力企業(yè)隱私的泄露

電力企業(yè)引入大數(shù)據(jù)系統(tǒng)的同時,需要將企業(yè)信息、員工信息以及其他方面的相關(guān)信息到網(wǎng)絡(luò)數(shù)據(jù)平臺中,信息一旦進入互聯(lián)網(wǎng)就可能面臨著泄密的危險,這些數(shù)據(jù)若得不到有效管控,很容易造成信息的泄露,從而引發(fā)多方面的風險,如:非法分子利用電力企業(yè)信息、個人隱私信息等從事非法交易、謀取暴利等,無疑會為企業(yè)的發(fā)展與運營帶來風險。

5信息安全防護技術(shù)措施與管理方法

5.1信息安全防護技術(shù)措施

面對大數(shù)據(jù)給電力信息安全帶來的風險,電力部門必須加大風險管控力度,采用先進的技術(shù)積極規(guī)避信息安全問題,其中隱私保護技術(shù)成為一項關(guān)鍵技術(shù),它包括:加密與密鑰管理技術(shù)、數(shù)字簽名技術(shù)、身份認證技術(shù)等,不同的隱私保護技術(shù)發(fā)揮著不同的安全保護功能,并形成了一個有機的架構(gòu)系統(tǒng)。

5.1.1數(shù)據(jù)擾亂技術(shù)

數(shù)據(jù)擾亂技術(shù)是一項重要的隱私保護技術(shù),它主要是通過擾亂、替換、添加隨機變量等來混淆視線,替代重要的數(shù)據(jù)信息,并對應(yīng)生成不確定的信息數(shù)據(jù),再開展相關(guān)的計算操作。

5.1.2加密與密匙技術(shù)

眾多的數(shù)據(jù)信息安全保護技術(shù)中,加密與密匙技術(shù)成為被認可的標準數(shù)據(jù)保護技術(shù),此技術(shù)依托于科學(xué)的加密算法與密鑰安全,能夠有效確保電力數(shù)據(jù)信息的安全。

5.1.3安全多方計算技術(shù)

該技術(shù)的運行原理為:在各個參與方之間進行協(xié)作計算函數(shù),參與方的輸入信息保密,不向彼此公開。遇到需要解決的問題時,設(shè)計一個函數(shù),相互配合計算此函數(shù),再引入安全多方計算模塊來解決問題。此技術(shù)能夠發(fā)揮對數(shù)據(jù)信息的安全保護功能,防止信息泄露,其隱私保護也有級別劃分。

5.1.4數(shù)字簽名技術(shù)

數(shù)字簽名技術(shù),就是只有信息的發(fā)送者才能產(chǎn)生的別人無法偽造的一段數(shù)字串,這段數(shù)字串同時也是對信息的發(fā)送者發(fā)送信息真實性的一個有效證明,該技術(shù)可以確保信息傳輸?shù)耐暾浴?/p>

5.1.5秘密共享技術(shù)

秘密共享,是將秘密分割存儲的密碼技術(shù),目的是阻止秘密過于集中,以達到分散風險和容忍入侵的目的,該技術(shù)是信息安全和數(shù)據(jù)保密中的重要手段。

5.1.6身份認證與訪問控制技術(shù)

所謂身份認證技術(shù),就是對用戶的身份信息進行驗證與識別的過程,以防范非法用戶的非法登錄行為。最常見的身份認證技術(shù)主要包括:口令核對、識別用戶生理特征等。認證成功后,再參照用戶具體的身份信息、職能信息等來限制數(shù)據(jù)的訪問范圍。通過對各類訪問的控制,最終實現(xiàn)對信息的安全保護目標.

5.2信息安全防護管理方法

大數(shù)據(jù)時代數(shù)據(jù)的安全防護不僅要依賴于技術(shù),更重要的是要加強管理,具體應(yīng)從風險管理系統(tǒng)建設(shè)、防護技術(shù)的運用和監(jiān)管等做起。①創(chuàng)建并完善大數(shù)據(jù)信息安全管理系統(tǒng)。電力企業(yè)應(yīng)認識到大數(shù)據(jù)安全管理工作的重要性,創(chuàng)建安全管理系統(tǒng),培養(yǎng)信息技術(shù)人才,打造一支先進的信息安全管理工作隊伍,及時更新大數(shù)據(jù)技術(shù),加大平臺建設(shè)力度,做好風險評估等多方面工作,打造一個標準的安全防護管理系統(tǒng),發(fā)揮對信息數(shù)據(jù)的保護功能。②重視安全防護技術(shù)的研發(fā)。電力企業(yè)為了維護自身的信息安全,必須與時俱進,積極研發(fā)信息安全防護技術(shù),加大在信息安全防護方面的投入,鼓勵信息技術(shù)人員深入研究新技術(shù),時刻保持自身信息防護技術(shù)的先進性,發(fā)揮技術(shù)措施的保護作用。③健全完善信息安全法律法規(guī)。解決數(shù)據(jù)安全的問題,需要政府加大對信息安全的重視程度,制定并實施信息安全方面的法律法規(guī),利用法律法規(guī)來約束、控制一些不法行為,從而達到對信息安全的保護作用。

6結(jié)束語

大數(shù)據(jù)技術(shù)的深入發(fā)展與廣泛運用,極大地推動著時代的發(fā)展與進步,各行各業(yè)進入信息數(shù)據(jù)新時代,大數(shù)據(jù)系統(tǒng)的運用有利有弊。電力行業(yè)作為關(guān)系國計民生的重要行業(yè),需要信任并利用大數(shù)據(jù)技術(shù),然而,信息安全問題成為時代關(guān)注的問題,應(yīng)該加強數(shù)據(jù)信息安全管理,掌握先進的數(shù)據(jù)安全防護技術(shù),提高信息防護水平,進而從整體上支持并促進電力企業(yè)的發(fā)展與進步。

作者: 單位:四川省電力公司運營監(jiān)控中心

參考文獻

[1]王倩,朱宏峰,劉天華.大數(shù)據(jù)安全的現(xiàn)狀與發(fā)展[J].計算機與網(wǎng)絡(luò),2013(16):67~69.

篇9

早在2012年,GE就已將目光瞄準工業(yè)互聯(lián)網(wǎng)和大數(shù)據(jù),率先提出要依靠機器與設(shè)備間的互聯(lián)互通及分析軟件,打造智能機器,實現(xiàn)人、機器和數(shù)據(jù)的無縫協(xié)作。

同年,麥肯錫報告也揭示了一個相關(guān)事實,即在虛擬經(jīng)濟占據(jù)主導(dǎo)地位的美國,其工業(yè)界蘊含的數(shù)據(jù)總量卻是最大,也最具價值。

那么如何解讀工業(yè)大數(shù)據(jù),可從產(chǎn)生背景、價值創(chuàng)造和工程實踐三方面考量。

“跨界”整合數(shù)據(jù)

工業(yè)大數(shù)據(jù)已成為新一輪產(chǎn)業(yè)革命的重要動力。

為什么提出工業(yè)大數(shù)據(jù),源于四個方面:一是數(shù)字化裝備和產(chǎn)品的普及,二是裝備和產(chǎn)品網(wǎng)絡(luò)化聯(lián)接的普及,三是企業(yè)向服務(wù)型制造的轉(zhuǎn)型,四是“從搖籃到搖籃”再制造的必然要求。

無論是德國提出的“工業(yè)4.0”,還是美國定義的“工業(yè)互聯(lián)網(wǎng)”,大數(shù)據(jù)在其中都發(fā)揮著重要作用。IBM認為,工業(yè)4.0是大數(shù)據(jù)驅(qū)動的智能制造,無數(shù)據(jù)不智能。GE表示,工業(yè)互聯(lián)網(wǎng)最重要的就是數(shù)據(jù)分析,未來每一家工業(yè)企業(yè)也必須是一家軟件企業(yè),有了軟件必然會有數(shù)據(jù)。

工業(yè)大數(shù)據(jù)是以工業(yè)、工業(yè)產(chǎn)品為主體,這些數(shù)據(jù)源于產(chǎn)品生命周期的各個環(huán)節(jié),涵蓋三個重要階段――開發(fā)制造階段(即 Beginning of Life )、使用維護階段(即 Middle of Life )及回收利用階段(即 End of Life )。其中,第一階段和第二階段的分離點是產(chǎn)品交付用戶的時刻,第二階段和第三階段的分離點則是產(chǎn)品退役時刻。

在產(chǎn)品生命周期中,包括市場、設(shè)計、制造、服務(wù)、再利用等各個環(huán)節(jié)都會產(chǎn)生數(shù)據(jù),“全”生命周期匯合起來的數(shù)據(jù)更大。當然,企業(yè)外、產(chǎn)業(yè)鏈外的“跨界”數(shù)據(jù)也是工業(yè)大數(shù)據(jù)不可忽視的重要來源。

認識工業(yè)大數(shù)據(jù)必須從信息時展變遷的視角去權(quán)衡。從傳統(tǒng)工業(yè)IT到GE強調(diào)的OT(Operation Technology)概念,再到DT(Data Technology)時代,工業(yè)大數(shù)據(jù)實際是三流合一,整合的是IT時代信息系統(tǒng)中的數(shù)據(jù)、OT時代以機器為主體的數(shù)據(jù),及DT時代網(wǎng)絡(luò)環(huán)境下的互聯(lián)網(wǎng)數(shù)據(jù)。

數(shù)據(jù)驅(qū)動價值創(chuàng)造

拉力戰(zhàn)神――Rally Fighter這款車的誕生就是工業(yè)大數(shù)據(jù)應(yīng)用的一個典型實例。這款車的制造商Local Motors是一家規(guī)模不大的網(wǎng)站,之所以能夠生產(chǎn)出這樣一款跑車與越野車完美融合的產(chǎn)品,依靠的是來自全球約三萬多個研發(fā)人員提供的一萬多個設(shè)計方案,從中尋找最優(yōu)方案,繼而生產(chǎn)制造。這種模式正是馬云當年稱之為C2B的制造模式。

這個案例可以窺得互聯(lián)網(wǎng)時代數(shù)據(jù)的力量。

制造業(yè)采購環(huán)節(jié)的大數(shù)據(jù)應(yīng)用也能夠幫忙企業(yè)提升其供應(yīng)鏈體系競爭力。以長安汽車為例,其對生產(chǎn)供應(yīng)鏈的高標準建設(shè)、格把控,使其在2015年躍居中國品牌價值評價汽車行業(yè)第一名。

長安汽車總裁朱華榮在多個場合多次強調(diào),采購工作要嚴格成本管控,做好資源儲備,杜絕零部件保供風險。而在采購環(huán)節(jié)真正的貨比三家,依靠的是數(shù)據(jù),是來自網(wǎng)絡(luò)渠道更廣泛的數(shù)據(jù),基于長安汽車強大的云計算平臺操作控件。

運行大數(shù)據(jù)的應(yīng)用也已有了成功實例。澳大利亞力拓集團通過持續(xù)監(jiān)測位于澳大利亞、蒙古和美國礦井,集成20個系統(tǒng)進行專業(yè)分析,同時通過管理實驗數(shù)據(jù)、操作日志、控制系統(tǒng)、視頻數(shù)據(jù)以及維護日志,獲得大量數(shù)據(jù)。這些運行數(shù)據(jù)可用于優(yōu)化礦石篩分過程,提高銅礦和金礦產(chǎn)量;識別異常情況,輔助現(xiàn)場決策;加快物流效率,減少成本損失。每年可為一個礦井帶來一百萬美元以上的年收益。

工況大數(shù)據(jù)實踐

目前,我國在裝備工況大數(shù)據(jù)平臺應(yīng)用方面已經(jīng)初有成效?!笆濉逼陂g,國內(nèi)裝備龍頭企業(yè)已經(jīng)開始建設(shè)裝備工況大數(shù)據(jù)平臺。隨著應(yīng)用的深入,需將工況數(shù)據(jù)的處理分析結(jié)果,向企業(yè)服務(wù)、制造甚至設(shè)計系統(tǒng)進行反饋,因此需要替換部分原有的關(guān)系數(shù)據(jù)管理系統(tǒng)。

與遺留系統(tǒng)進行集成,甚至替換“舊”系統(tǒng),是工業(yè)大數(shù)據(jù)項目區(qū)別于互聯(lián)網(wǎng)大數(shù)據(jù)項目的重要內(nèi)容,因為互聯(lián)網(wǎng)業(yè)務(wù)往往是“全新的”。在具體實踐中,我們形成了 “ 四階段 ” 切換方案――即切入準備、寫入接口切換、查詢接口切換、原數(shù)據(jù)庫切出。

以三一工業(yè)大數(shù)據(jù)平臺為例,我們現(xiàn)已真正解決了生產(chǎn)系統(tǒng)與其他業(yè)務(wù)系統(tǒng)的關(guān)聯(lián)和切換問題。目前,有將近二十萬臺設(shè)備(六萬臺活躍設(shè)備)已實現(xiàn)接入,其監(jiān)控數(shù)據(jù)都可傳到我們的工況大數(shù)據(jù)平臺上來。

在得到工況數(shù)據(jù)以后,首先我們可對裝備運營進行監(jiān)管,不同于傳統(tǒng)的運營監(jiān)管,在大數(shù)據(jù)技術(shù)支持下,運營是成套設(shè)備互相協(xié)同的運營,例如:以攪拌站為例,通過收集位置數(shù)據(jù)、油位數(shù)據(jù)可以對攪拌車運輸?shù)倪^程進行優(yōu)化調(diào)度,從而避免擁堵、減少等待、降低能耗。

再舉個例子,我們知道液壓系統(tǒng)是工程機械的核心系統(tǒng)之一,導(dǎo)致故障的原因很多,如密封套腐蝕、內(nèi)壁刮花、密封環(huán)損壞,閥塊受損等。有了工況大數(shù)據(jù)就可以尋找更深層次的原因。

我們可以通過大規(guī)模比對開工指標,從典型取值、波動幅度、回傳密度多個維度進行分析,自動搜索推薦與故障車輛關(guān)系密切的特征工況,發(fā)現(xiàn)這些故障車輛的每分鐘換向次數(shù)在變化幅度上高度相關(guān)。

再通過引入互聯(lián)網(wǎng)上的行政區(qū)劃數(shù)據(jù)和歷年高鐵建設(shè)數(shù)據(jù)(企業(yè)外部數(shù)據(jù)),可以得出這樣一個結(jié)論:這些典型故障均發(fā)生在2012年~2013年期間在建重大工程“杭深高鐵”沿線,這為我們尋找更深層次的原因提供了重要線索。此外,通過大規(guī)模工況數(shù)據(jù)我們還可透視宏觀裝備應(yīng)用情況,根據(jù)這些信息進行易損配件需求的預(yù)測,優(yōu)化調(diào)配我們的服務(wù)資源。當然,裝備開工情況,也反映了各地區(qū)宏觀經(jīng)濟情況。

總之,工業(yè)大數(shù)據(jù)是推動工業(yè)產(chǎn)品創(chuàng)新的重要途徑,在我國工業(yè)大數(shù)據(jù)剛剛起步階段,需冷靜思考,堅持應(yīng)用驅(qū)動,邁向中國制造強國之路。

相關(guān)鏈接

工業(yè)大數(shù)據(jù)不是“交鑰匙”工程

王建民指出,目前工業(yè)大數(shù)據(jù)不存在“交鑰匙”工程,原因如下所述。

篇10

2015年9月5日,《國務(wù)院關(guān)于印發(fā)促進大數(shù)據(jù)發(fā)展行動綱要的通知》正式,在全社會引起廣泛影響。在此前后,社會上的大數(shù)據(jù)浪潮洶涌澎湃,推動和裹挾著每一個行業(yè)、部門和企業(yè)。一些單位和部門急于“搶占大數(shù)據(jù)制高點”,紛紛出臺了一系列政策、措施、機構(gòu)和項目;氣象部門也未能例外,以氣象大數(shù)據(jù)為名上項目、搞工程的苗頭已經(jīng)出現(xiàn)。如何認識大數(shù)據(jù),大數(shù)據(jù)是否適用于氣象部門,以及適用于哪些領(lǐng)域,是氣象部門決策機構(gòu)需要思考、分析和綜合歸納的問題,因為這些問題的厘清有助于盡可能避免工作中的盲目性并減少失誤。

(一) 大數(shù)據(jù)時代的背景

所謂“大數(shù)據(jù)時代”的到來,是水到渠成的必然結(jié)果,歸納起來有以下幾個方面:

1. 數(shù)據(jù)源泛在化

移動智能設(shè)備、可穿戴設(shè)備、互聯(lián)網(wǎng)應(yīng)用等設(shè)備和系統(tǒng)應(yīng)用的普及,使得數(shù)據(jù)的采集不再停留在專業(yè)部門的業(yè)務(wù)系統(tǒng)范疇:手機、身份證、交通卡、銀行卡、門禁卡、網(wǎng)上查詢、網(wǎng)上聊天、網(wǎng)購、網(wǎng)游、GPS定位、視頻監(jiān)控、ETC等一切智能設(shè)備都是數(shù)據(jù)設(shè)備,只要人跡所至,就有數(shù)據(jù)產(chǎn)生。較之上世紀,數(shù)據(jù)源已極大地泛在化了。

2. 網(wǎng)絡(luò)廣泛連接

在數(shù)據(jù)源極大泛在化的同時,互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)及物聯(lián)網(wǎng)將所有數(shù)據(jù)源連接在一起,人類歷史上首次實現(xiàn)了人與人、人與物、物與物之間廣泛的連接和自由交換數(shù)據(jù)。從而將單臺設(shè)備的數(shù)據(jù)能力升級到全球網(wǎng)的層次上,極大地提升了系統(tǒng)的智能潛力。梅特卡夫定律指出:“網(wǎng)絡(luò)的價值與參與者的平方成正比”,網(wǎng)絡(luò)的廣泛連接極大增加了互聯(lián)網(wǎng)的應(yīng)用價值,其中包括全社會數(shù)據(jù)利用能力的增加,以及提高生產(chǎn)力機會的增加。

3. 軟件的普及和智能化

軟件是人類知識和智慧的外在形態(tài)和應(yīng)用載體,軟件將硬件設(shè)備、網(wǎng)絡(luò)資源、傳感器、控制器與數(shù)據(jù)組織成為能夠?qū)崿F(xiàn)目標的智能系統(tǒng),軟件是智能系統(tǒng)的靈魂,也是大數(shù)據(jù)應(yīng)用的核心。數(shù)據(jù)只有在被處理和應(yīng)用之時,方才成其為資源,否則只能是垃圾;所擁有數(shù)據(jù)是廢是寶,最終由軟件的能力決定。

4. 生態(tài)環(huán)境的形成

“四個無處不在”以及數(shù)據(jù)源的泛在化,體現(xiàn)了包括傳感器、智能終端、高速網(wǎng)絡(luò)、移動互聯(lián)網(wǎng)、云平臺、大數(shù)據(jù)處理技術(shù)、地理系統(tǒng)技術(shù)等多種信息技術(shù)共生的新生態(tài)環(huán)境,所有這一切構(gòu)成了大數(shù)據(jù)生長的肥沃土壤。這些基礎(chǔ)技術(shù)的出現(xiàn)和普及應(yīng)用為新技術(shù)、新應(yīng)用的集成創(chuàng)新提供了良好的機會。大數(shù)據(jù)時代是數(shù)據(jù)大爆發(fā)的時代,也是智能系統(tǒng)大爆發(fā)的時代。

5. 互聯(lián)網(wǎng)巨頭的推動

互聯(lián)網(wǎng)將所有數(shù)據(jù)源連接在一起,網(wǎng)上業(yè)務(wù)量的激增導(dǎo)致互聯(lián)網(wǎng)企業(yè)的業(yè)務(wù)數(shù)據(jù)呈指數(shù)倍激增,使得那些成功的互聯(lián)網(wǎng)企業(yè)在迅速成為互聯(lián)網(wǎng)巨頭(如:谷歌、亞馬遜、百度、阿里、騰訊等)的同時,其原有的數(shù)據(jù)存儲系統(tǒng)也被一一撐爆,以至于這些互聯(lián)網(wǎng)巨頭們始終在馬不停蹄地瘋狂擴充自身的存儲和處理能力。面對這些每天都在剜心割肉地消耗著不菲的維護資金的龐大業(yè)務(wù)數(shù)據(jù),如何將其進一步變現(xiàn),以變廢為寶、變閑為寶,發(fā)掘這些業(yè)務(wù)數(shù)據(jù)在業(yè)務(wù)應(yīng)用之外的新的價值,便成為這些互聯(lián)網(wǎng)巨頭們迫切需要解決的新課題――此即為何大數(shù)據(jù)概念的出現(xiàn)以及大數(shù)據(jù)技術(shù)的發(fā)展均來自互聯(lián)網(wǎng)巨頭及業(yè)務(wù)的推動的主要原因。拋開商業(yè)目的,互聯(lián)網(wǎng)巨頭們對大數(shù)據(jù)技術(shù)及應(yīng)用的推動,客觀上改變了人們從數(shù)據(jù)中獲取信息的理念,促成了大數(shù)據(jù)應(yīng)用理念的革命。

(二) 觀察大數(shù)據(jù)的視角

大數(shù)據(jù)時代是信息技術(shù)發(fā)展的必然結(jié)果,它的到來不可抗拒。現(xiàn)象的出現(xiàn)和應(yīng)用的需要,必然導(dǎo)致理論的產(chǎn)生。而大數(shù)據(jù)理論的主要基礎(chǔ),是考察該事物的視角。

1. 提取和應(yīng)用信息的視角(關(guān)注于數(shù)據(jù)處理理念和方法的改變)

從數(shù)據(jù)本身的角度出發(fā)考察大數(shù)據(jù),是大數(shù)據(jù)浪潮發(fā)端時最初的公認視角。其最具代表性的理念更新當屬《大數(shù)據(jù)時代》一書的作者邁爾.舍恩伯格,該作者將大數(shù)據(jù)理念的精髓概括為三點:不是隨機樣本,而是全體數(shù)據(jù);不是精確性,而是混雜性;不是因果關(guān)系,而是相關(guān)關(guān)系。作者在書中雄辯滔滔地論述此三味真火的背后,有其內(nèi)心深處對世界本質(zhì)的認識做支撐。但無論如何,作者對大數(shù)據(jù)應(yīng)用歸納的新理念,對于利用大數(shù)據(jù)資源獲取信息的應(yīng)用提供了一種新思路,其新穎的大數(shù)據(jù)思維也為科技探索提供了一種新的模式。

《大數(shù)據(jù)時代》作者在書中關(guān)注的是如何從大數(shù)據(jù)中挖掘出更加準確和豐富的信息,以便指導(dǎo)和改進人們的工作、提高決策水平等等,其視角是大數(shù)據(jù)的信息提取和應(yīng)用。氣象部門的大數(shù)據(jù)應(yīng)用既屬此范圍,即:從數(shù)據(jù)中提取信息供決策使用。

2. 信息和內(nèi)容價值的視角(關(guān)注連接范圍的是否全面)

大數(shù)據(jù)產(chǎn)生信息的價值并不取決于其所產(chǎn)自的數(shù)據(jù)集的規(guī)模大小,而在于該數(shù)據(jù)集內(nèi)容的豐富與否。用一架高分辨率攝像機對準一面空白墻面連續(xù)拍攝數(shù)周,也能產(chǎn)生PB級的數(shù)據(jù),但其應(yīng)用價值卻極低,原因很簡單:雖然其體量甚大,但其中所含信息內(nèi)容卻極度貧乏。無人駕駛汽車的研制之所以難度甚高,除需要處理的周邊環(huán)境的信息量巨大外,還在于無法全部獲取周圍其它行駛車輛駕駛?cè)藛T當前及將要采取措施的信息。

此外,大數(shù)據(jù)的應(yīng)用價值除了其內(nèi)容的是否豐富以外,還取決于對本應(yīng)用是否適用。阿里電商大數(shù)據(jù)可以用來分析宏觀經(jīng)濟形勢,卻無法用來分析火星地表是否存在液態(tài)水,因為這些大數(shù)據(jù)內(nèi)容雖然豐富,但卻不包含任何有關(guān)火星方面的信息內(nèi)容。

因此,一個應(yīng)用廣泛的大數(shù)據(jù),一定是一個內(nèi)容十分豐富――換句話說,就是連接面十分廣泛、全面――的數(shù)據(jù)集,與體量沒有必然關(guān)系。就價值而言,連接比規(guī)模更重要。

3. 行政決策和國家治理的視角(關(guān)注社會治理能力的提升)

國家宏觀經(jīng)濟形勢、百姓的消費熱點、民眾對某一重大事件的反應(yīng)、流行疾病的爆發(fā)預(yù)警乃至反恐維穩(wěn)的目標鎖定等等,這些涉及政府行政決策的信息,以及這些信息的全面、準確和及時,都是政府在國家治理層面迫切需要的。雖然這些信息大多也有一定的正規(guī)獲取渠道(甚至設(shè)有專業(yè)部門負責),但種種原因?qū)е铝诉@些渠道所采集和匯集的信息往往或不精細、或不準確、或不完整、或不及時,使得國家行政決策因之而難以達到預(yù)期效果。改造完善這些渠道需要耗費大量成本和時間,于是在現(xiàn)有的、沉睡在各部門和企業(yè)系統(tǒng)中的業(yè)務(wù)數(shù)據(jù)中提取相關(guān)信息,以彌補現(xiàn)有信息渠道的各種不足,便成為信息獲取的新途徑和新思路。從目前業(yè)界所熱傳的所有大數(shù)據(jù)應(yīng)用成功案例看,絕大部分屬于人文社會領(lǐng)域,從一個側(cè)面印證了大數(shù)據(jù)對于改善國家宏觀治理的重要意義。有效開發(fā)互聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用,可以顯著提升政府的國家治理能力和決策的科學(xué)性,這是許多國家政府和智庫的共識。因此,不少發(fā)達國家紛紛制訂本國的國家大數(shù)據(jù)戰(zhàn)略,我國也不例外。

4. 簡單的事實:所有大數(shù)據(jù)應(yīng)用成果都是業(yè)務(wù)數(shù)據(jù)的副產(chǎn)品

分析目前已有的大數(shù)據(jù)應(yīng)用成功案例,可以發(fā)現(xiàn)一個事實:所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)源,都來自于非專屬于本應(yīng)用目標的業(yè)務(wù)數(shù)據(jù)。換言之,所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)來源,都不是專為本應(yīng)用而特設(shè)的:啤酒和嬰兒尿布的關(guān)聯(lián)關(guān)系產(chǎn)自于對沃爾瑪超市結(jié)算柜臺的貨品銷售日志分析;阿里巴巴對2008年全球宏觀經(jīng)濟形勢的準確預(yù)測來源于對淘寶網(wǎng)采購單數(shù)量、規(guī)模和內(nèi)容的變化、以及變化的地理分布特征分析;美國國家安全部門對的鎖定,相當部分來自于對互聯(lián)網(wǎng)巨頭所掌握的電郵的內(nèi)容分析,等等。原因很簡單,由于成本或難度太高,人們不可能為了某項大數(shù)據(jù)應(yīng)用而專門去采集原始數(shù)據(jù)。大數(shù)據(jù)應(yīng)用大多只能使用那些已經(jīng)存在的、非為本應(yīng)用所特設(shè)的業(yè)務(wù)系統(tǒng)所積累的數(shù)據(jù)資源,且收集和維護這些數(shù)據(jù)的成本是由這些業(yè)務(wù)系統(tǒng)所屬單位承擔的。因此,大數(shù)據(jù)應(yīng)用是業(yè)務(wù)數(shù)據(jù)的副產(chǎn)品。

蓋緣于此,大數(shù)據(jù)應(yīng)用的數(shù)據(jù)源(即:合適的業(yè)務(wù)數(shù)據(jù))的尋找,本身就是一個難題。

(三) 大數(shù)據(jù)的辨識

1. 從應(yīng)用的視角觀察大數(shù)據(jù)

數(shù)據(jù)是服務(wù)于應(yīng)用的,大數(shù)據(jù)也不例外。

當一個新的應(yīng)用出現(xiàn),現(xiàn)有業(yè)務(wù)數(shù)據(jù)無法滿足其數(shù)據(jù)需求時,必須尋找新的數(shù)據(jù)源。在尋找過程中,如果自行采集數(shù)據(jù)能夠滿足需求,且成本能夠接受,則采取該方式是最好的選擇,因為采集的過程和方法受需求者控制,所采集的數(shù)據(jù)最接近需求(如:十一五、十二五氣象部門建設(shè)的全國天氣雷達站網(wǎng)及遍布全國所有鄉(xiāng)鎮(zhèn)的地面自動氣象站等)。而當自行采集的成本過于昂貴、以致無法承受時,選用替代數(shù)據(jù)便是將工作繼續(xù)進行下去的唯一選擇了。以往信息相對貧乏的年代,可供選擇的合適的替代數(shù)據(jù)不多,許多工作因之而無法開展。互聯(lián)網(wǎng)時代信息量暴增,替代數(shù)據(jù)的選擇范圍有了很大改善,使得許多過去無法開展的工作,現(xiàn)在有可能開展起來了。然而,由于這些替代數(shù)據(jù)自身不是因本需求而產(chǎn)生的,故不可避免地存在諸如:體量雖大但針對本需求所需的信息稀薄,信息質(zhì)量不高、故難以得到確切結(jié)論,許多現(xiàn)象和結(jié)論難以解釋等痼疾。于是,“是全體數(shù)據(jù)而不是樣本數(shù)據(jù)、是模糊結(jié)論而不是精確結(jié)論、是相關(guān)關(guān)系而不是因果關(guān)系”的大數(shù)據(jù)的理念和方法由此產(chǎn)生。

從應(yīng)用的角度評價大數(shù)據(jù),可以得出以下結(jié)論:

雖然就數(shù)據(jù)血統(tǒng)而言,大數(shù)據(jù)在實際應(yīng)用中往往不屬于專為本應(yīng)用采集的血統(tǒng)純正的數(shù)據(jù),但它的存在和被使用卻是使得眾多創(chuàng)新應(yīng)用得以實現(xiàn)。因此大數(shù)據(jù)是資源。

當今新的時代已經(jīng)進入信息經(jīng)濟和知識經(jīng)濟的新時代,這是一個以信息和知識為基礎(chǔ)的經(jīng)濟,是一個在更大程度上依賴于在生產(chǎn)、分配和使用等各個環(huán)節(jié)中知識和信息所作貢獻的新的經(jīng)濟。因此大數(shù)據(jù)是新的生產(chǎn)力要素。

2. 大數(shù)據(jù)的可能與不能

大數(shù)據(jù)可能提供有價值的參考信息,包括:

大數(shù)據(jù)可能為政府的科學(xué)決策提供有價值的參考信息。

大數(shù)據(jù)可能對企業(yè)的業(yè)務(wù)改進提供數(shù)據(jù)支持和信息支持。

大數(shù)據(jù)可能為一些社會科學(xué)領(lǐng)域的學(xué)科研究提供有價值的信息。

大數(shù)據(jù)甚至有可能對自然科學(xué)研究中的一些新的科學(xué)機理的發(fā)現(xiàn)提供參考信息。

與此同時,不能指望單靠大數(shù)據(jù)就能全面提高政府決策水平。因為決策依賴于多方面信息的綜合,大數(shù)據(jù)只是提供信息的途徑之一,僅靠它是無法解決政府決策的諸多問題的。高層決策主要面對的是諸多不確定性環(huán)境,需要廣闊的視野與豐富的經(jīng)驗。深厚的歷史背景、細微的地緣差異、復(fù)雜的宗教派系之爭以及民族間的矛盾等等,這些因素交織在一起,關(guān)系復(fù)雜而頭緒繁多,遠非數(shù)據(jù)統(tǒng)計分析那樣簡單。大數(shù)據(jù)能夠為行政決策提供一項或多項較為準確的參考信息,改善影響決策的信息的質(zhì)量,但信息的綜合和最終的決策必須依靠人。

其次,大數(shù)據(jù)不可能直接解決科學(xué)機理問題。從大數(shù)據(jù)“模糊而非精確”、“只求相關(guān)而非探究因果”的理念可以看出,大數(shù)據(jù)只關(guān)注于現(xiàn)象之間的關(guān)聯(lián)性,但不探究這些關(guān)聯(lián)背后的因果關(guān)系,但求知其然,而不愿(甚至不屑)探究其所以然。之所以如此,是與大數(shù)據(jù)的理論構(gòu)建者所固有的對世界的認知:“混亂構(gòu)成了世界的本質(zhì),也構(gòu)成了人腦的本質(zhì)”的哲學(xué)觀所決定的。本文無意探討哲學(xué)問題,但由此可以推斷:就認識論而言,大數(shù)據(jù)屬于經(jīng)驗主義范疇,它無法直接解決科學(xué)問題,尤其是以科學(xué)機理(即所謂因果關(guān)系)為核心的氣象預(yù)報科學(xué)問題。在氣象理論研究領(lǐng)域,大數(shù)據(jù)可能的貢獻在于提供參考信息(如:具有一定關(guān)聯(lián)度的氣象要素組合等),以供氣象科學(xué)家們分析研究。

二、氣象大數(shù)據(jù)辨析

(一) 氣象大數(shù)據(jù)的內(nèi)涵

就數(shù)據(jù)本身而言,氣象大數(shù)據(jù)是指所有與氣象工作相關(guān)的數(shù)據(jù)總和;從來源渠道劃分,氣象大數(shù)據(jù)可分為“行業(yè)大數(shù)據(jù)”和“互聯(lián)網(wǎng)大數(shù)據(jù)”兩類。其中:

“氣象行業(yè)大數(shù)據(jù)”由與氣象部門各項工作相關(guān)、且產(chǎn)生自氣象部門內(nèi)部的所有數(shù)據(jù)組成,包括:由氣象部門建設(shè)的、具有國內(nèi)最高專業(yè)水準的氣象探測體系所產(chǎn)生的氣象專業(yè)探測數(shù)據(jù),其它部門自行采集、通過數(shù)據(jù)共享/交換等方式匯聚到氣象部門、且經(jīng)過氣象部門嚴格質(zhì)量控制的氣象要素探測數(shù)據(jù),由氣象業(yè)務(wù)部門和業(yè)務(wù)系統(tǒng)產(chǎn)生的各類氣象服務(wù)產(chǎn)品數(shù)據(jù)、派生數(shù)據(jù)及中間產(chǎn)品數(shù)據(jù),職能部門各管理系統(tǒng)(如:財務(wù)系統(tǒng)、人力資源系統(tǒng)、項目管理系統(tǒng)等)所產(chǎn)生和管理的數(shù)據(jù),各業(yè)務(wù)和管理系統(tǒng)的狀態(tài)數(shù)據(jù)和日志數(shù)據(jù),等等。

“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”由互聯(lián)網(wǎng)上與氣象相關(guān)的所有數(shù)據(jù)所組成,包括:移動終端搭載的氣象要素傳感設(shè)備的探測數(shù)據(jù),網(wǎng)友隨手拍并上傳的天氣狀態(tài)照片,搜索引擎對氣象相關(guān)敏感詞的統(tǒng)計分析數(shù)據(jù),其它所有可供氣象部門業(yè)務(wù)和服務(wù)應(yīng)用的互聯(lián)網(wǎng)數(shù)據(jù)等等。

“氣象行業(yè)大數(shù)據(jù)”與“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”間存在很大差異,限于篇幅,難以在此做詳細分析。簡言之,“氣象行業(yè)大數(shù)據(jù)”屬于氣象業(yè)務(wù)數(shù)據(jù),其生成的直接目標是服務(wù)于氣象業(yè)務(wù)和工作的,故其氣象信息濃度高、各種技術(shù)指標亦最為符合氣象業(yè)務(wù)和工作的各項要求?!皻庀蠡ヂ?lián)網(wǎng)大數(shù)據(jù)”則不然,它不是專為氣象工作而生成的,它產(chǎn)自于其它非氣象部門的行業(yè)、企業(yè),是為滿足這些行業(yè)和企業(yè)自身業(yè)務(wù)目標而生成的。這些數(shù)據(jù)之所以被納入“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”的范圍,是因為這些數(shù)據(jù)包含有與特定氣象應(yīng)用相關(guān)的信息內(nèi)容,而這些內(nèi)容是氣象行業(yè)大數(shù)據(jù)所缺乏的;亦即,這些數(shù)據(jù)是為彌補氣象行業(yè)大數(shù)據(jù)在內(nèi)容和時空密度等方面的不足而從互聯(lián)網(wǎng)上收集來的;故其氣象信息的濃度、數(shù)據(jù)質(zhì)量等參差不齊,各項技術(shù)指標也往往差強人意。即便就氣象要素而言,兩者之間存在的差異也是很明顯的,見表1:

表1、氣象行業(yè)/互聯(lián)網(wǎng)大數(shù)據(jù)中氣象要素之間的差異

從內(nèi)容上劃分,氣象行業(yè)大數(shù)據(jù)大致有:氣象觀測原始數(shù)據(jù)、氣象觀測產(chǎn)品數(shù)據(jù)、氣象業(yè)務(wù)產(chǎn)品數(shù)據(jù)、氣象服務(wù)產(chǎn)品數(shù)據(jù)、業(yè)務(wù)日志數(shù)據(jù)、設(shè)備及系統(tǒng)狀態(tài)數(shù)據(jù)、氣象管理數(shù)據(jù)等等。需要說明的是,目前對氣象數(shù)據(jù)范疇的界定,只包含前四項,即:氣象觀測原始數(shù)據(jù)、氣象觀測產(chǎn)品數(shù)據(jù)、氣象業(yè)務(wù)產(chǎn)品數(shù)據(jù)、氣象服務(wù)產(chǎn)品數(shù)據(jù)。其后的業(yè)務(wù)日志數(shù)據(jù)、設(shè)備及系統(tǒng)狀態(tài)數(shù)據(jù)、氣象管理數(shù)據(jù)等尚未正式納入氣象數(shù)據(jù)的定義范圍。

從性質(zhì)上考察,氣象行業(yè)大數(shù)據(jù)屬于“氣象業(yè)務(wù)數(shù)據(jù)”范疇,即:每類數(shù)據(jù)都有其特定的使用目的、使用對象及數(shù)據(jù)形態(tài),且所有數(shù)據(jù)的初始目的都是圍繞滿足氣象部門自身運轉(zhuǎn)所特有的數(shù)據(jù)需求的。

從體量上衡量,“氣象行業(yè)大數(shù)據(jù)”雖可勉強躋身大數(shù)據(jù)行列(PB級),但較之互聯(lián)網(wǎng)公司而言,仍有至少2~4個數(shù)量級之間的差距。以目前業(yè)界現(xiàn)有處理技術(shù),完全可以滿足“氣象行業(yè)大數(shù)據(jù)”在分析處理方面的時效要求(數(shù)值預(yù)報除外)。因此對于“氣象行業(yè)大數(shù)據(jù)”而言,單純的管理和處理技術(shù)不是問題所在。

(二) 氣象大數(shù)據(jù)與預(yù)報準確率

將大數(shù)據(jù)理念和方法全面應(yīng)用到氣象部門,在部門內(nèi)開展氣象大數(shù)據(jù)工作,能否有效提高預(yù)報準確率,這是本文首先必須正面回答的問題。

1. 大數(shù)據(jù)理念和方法探究

《大數(shù)據(jù)時代》一書的作者將大數(shù)據(jù)理念的精髓概括為三點:“不是隨機樣本,而是全體數(shù)據(jù);不是精確性,而是混雜性;不是因果關(guān)系,而是相關(guān)關(guān)系”。深究下去,不免使人產(chǎn)生質(zhì)疑:首先,如果通過分析少量的樣本數(shù)據(jù)就可以得到事物的準確本質(zhì)(如:適用于數(shù)學(xué)歸納法的數(shù)據(jù)集),是否還有必要花費巨大成本去收集和處理全體數(shù)據(jù)?其次,如果能夠得到準確數(shù)據(jù)或結(jié)論(如:臺風路徑和登陸地點、暴雨的落區(qū)),是否還有必要刻意去追求混雜不準確的數(shù)據(jù)或結(jié)論;第三,如果能夠了解并掌握因果關(guān)系(如:人類活動與氣候變暖之間的關(guān)系),是否還要放棄對因果關(guān)系的探尋,而只去分析相關(guān)關(guān)系?

答案顯然都是否定的。

所以,不能生搬硬套大數(shù)據(jù)的理念和方法,否則可能會出現(xiàn)有違基本常識的舉措和結(jié)果。對于大數(shù)據(jù)理念和方法,其合理的解釋應(yīng)該是:如果通過分析少量的樣本數(shù)據(jù)無法得到事物的本質(zhì),則人們將不得不花費更多成本去搜集和處理全體數(shù)據(jù),以求得到事物的真實本質(zhì)。如果得不到準確的數(shù)據(jù)或結(jié)論,則人們將不得不接受那些差強人意的不十分準確的數(shù)據(jù)或結(jié)論。如果無法了解到事物之間的因果關(guān)系,則人們將退而求其次,通過分析相關(guān)關(guān)系來了解事物。

因此,由《大數(shù)據(jù)時代》作者所定義的大數(shù)據(jù)方法,不應(yīng)該是刻意為之的,而應(yīng)該是不得已而為之的:當現(xiàn)有的觀測數(shù)據(jù)無法滿足業(yè)務(wù)需求、且布設(shè)新的探測設(shè)備代價太高或無法布設(shè)時,只能尋找其它代用數(shù)據(jù),以彌補現(xiàn)有觀測數(shù)據(jù)的某些不足。當無法做出準確預(yù)報時,概率預(yù)報是退而求其次的預(yù)報方法。當氣候變化規(guī)律目前無法完全掌握時,氣候統(tǒng)計預(yù)測方法便是填補氣候預(yù)測方法空白的可接受的選擇之一了,如此等等。

2. 觀測數(shù)據(jù)和科學(xué)研究是氣象學(xué)科的主要支撐

上世紀二、三十年代,無線電通信技術(shù)引入到氣象地面和高空觀測信息通信,人們能夠獲得大范圍的大氣立體觀測資料,在此背景下,科學(xué)家們通過對觀測資料的深入分析,并根據(jù)流體力學(xué)、動力學(xué)/熱力學(xué)定律等物理學(xué)原理,構(gòu)建起了氣象學(xué)科的基本框架,并在日后的歲月里不斷豐富完善。因此,氣象學(xué)科是建立在觀測資料基礎(chǔ)之上,并由氣象學(xué)家們通過深入的科學(xué)分析研究,發(fā)現(xiàn)其中的內(nèi)在機理,進而形成相應(yīng)的理論體系而最終構(gòu)建的。隨著資料的不斷豐富,科學(xué)家們不斷發(fā)現(xiàn)著新的天氣/氣候變化內(nèi)在科學(xué)機理,氣象學(xué)科因此得以成長發(fā)展。如果沒有氣象科學(xué)家天才卓越的分析研究成果,氣象觀測資料便僅僅是一堆天氣現(xiàn)象的記錄數(shù)據(jù)。因此對于氣象學(xué)科而言,觀測數(shù)據(jù)/產(chǎn)品和科學(xué)分析研究,二者缺一不可。而在人工智能達到能夠具有科學(xué)家們深厚的知識背景、敏銳的捕捉現(xiàn)象的本能、嚴謹?shù)耐蒲菁记珊吞觳诺木C合分析判斷能力之前,這些科學(xué)分析研究工作就只能由科學(xué)家們承擔并完成。

氣象業(yè)務(wù)的現(xiàn)代化水平最終體現(xiàn)在氣象預(yù)報的準確率,所追求的恰恰就是精確和及時。如果不掌握天氣變化的內(nèi)在規(guī)律(即所謂因果關(guān)系),單憑現(xiàn)象要素之間相關(guān)性的強弱,是很難達到及時精確預(yù)報的要求的。地震前許多動物的行為舉止往往異常,但動物舉止異常卻不見得預(yù)示著地震的即將發(fā)生。止步于天氣現(xiàn)象與氣象要素之間相關(guān)性的統(tǒng)計分析,不對其做進一步的機理分析研究,對氣象學(xué)科而言,不是科學(xué)的態(tài)度。

3. 統(tǒng)計分析是氣象部門常用的方法

探究科學(xué)機理是十分艱難的。在尚未掌握科學(xué)機理的情況下,統(tǒng)計分析是常用的預(yù)報方法,如氣候領(lǐng)域里的氣候統(tǒng)計預(yù)測。這種通過對長時間序列氣象觀測資料進行統(tǒng)計分析,以歷史上相似天氣現(xiàn)象所發(fā)生的天氣(或氣候)變化的概率為依據(jù),進行氣候預(yù)測的方法,自氣候?qū)W科發(fā)端之日起,便一直在采用,已達數(shù)十年之久。因此“大數(shù)據(jù)”所推崇的統(tǒng)計分析方法,氣象部門早在數(shù)十年前便已悉數(shù)使用,并不陌生。

但這并不意味著氣象部門在該領(lǐng)域的科學(xué)研究止步于此。事實上,目前基于動力框架的氣候數(shù)值預(yù)報模式(尤其是集合預(yù)報模式等)等方法一直在積極地試驗和嘗試使用之中,目的就在于探索能夠有效發(fā)現(xiàn)氣候變化規(guī)律(即所謂因果關(guān)系)的路徑和方法――雖然氣候統(tǒng)計預(yù)測方法仍在使用之中。目前數(shù)值天氣預(yù)報和數(shù)值氣候預(yù)測中所大量采用的集合預(yù)報方法,就是“因果”與“相關(guān)”、機理與統(tǒng)計之間有機結(jié)合的一種嘗試。

4. 氣象觀測數(shù)據(jù)是所有數(shù)據(jù)中最重要的貢獻者

從上文“氣象大數(shù)據(jù)的內(nèi)涵”中的分析可得知,與一般大數(shù)據(jù)所使用的數(shù)據(jù)源不同,氣象行業(yè)大數(shù)據(jù)中的氣象觀測數(shù)據(jù)及產(chǎn)品是專門為氣象預(yù)報業(yè)務(wù)工作而采集的,其時空分布、數(shù)據(jù)質(zhì)量及其它各種技術(shù)指標最符合氣象業(yè)務(wù)的各項要求,氣象業(yè)務(wù)所需信息的濃度也最高。比較而言,氣象互聯(lián)網(wǎng)大數(shù)據(jù)的氣象信息密度不高,數(shù)據(jù)質(zhì)量也難以保證,其它技術(shù)指標更是難以保證滿足氣象應(yīng)用的需求。因此,從氣象行業(yè)大數(shù)據(jù)中的氣象觀測數(shù)據(jù)和產(chǎn)品產(chǎn)生出來的統(tǒng)計分析結(jié)論以及學(xué)科科學(xué)機理的發(fā)現(xiàn)是具有權(quán)威性的。就預(yù)報準確率而言,氣象觀測數(shù)據(jù)/產(chǎn)品是所有數(shù)據(jù)中最重要的貢獻者,氣象互聯(lián)網(wǎng)大數(shù)據(jù)是它的補充而絕非替代者。

5. 大數(shù)據(jù)并非提高預(yù)報準確率的終南捷徑

綜上所述,氣象預(yù)報對準確率永遠的追求決定了,氣象學(xué)科必須以探究并最終掌握大氣運動的內(nèi)在機理為工作目標。而大數(shù)據(jù)方法是在特定的、理想狀態(tài)無法滿足情況下的退而求其次的方法,即:在尚未完全掌握大氣運動規(guī)律、無法通過理論推演和方程計算準確預(yù)報天氣或氣候的情況下,統(tǒng)計分析方法也許是一種補充完善的途徑。在無法斷定抽樣分析所得結(jié)論的正確性時,分析全體數(shù)據(jù)也許是一種最終解決方案。在無法提供準確預(yù)報時,概率預(yù)報也是一種不錯的選擇。但是,如果通過努力有可能達到理想狀態(tài),人們便不應(yīng)該盲目的生搬硬套大數(shù)據(jù)方法;因為對氣象預(yù)報而言,因果關(guān)系的掌握遠比相關(guān)關(guān)系的發(fā)現(xiàn)更為重要,后者是為前者提供線索而非取代前者的。同樣,精確的分析和預(yù)報結(jié)論永遠比模糊的分析和預(yù)報結(jié)論更加滿足預(yù)報需求,收集和處理樣本數(shù)據(jù)永遠比收集和處理全體數(shù)據(jù)更為高效和節(jié)省資源。

所以,大數(shù)據(jù)理念和方法并非提高預(yù)報準確率的終南捷徑。

當然,筆者并不否認大數(shù)據(jù)方法在客觀預(yù)報產(chǎn)品解釋應(yīng)用方面對預(yù)報效果的改善有所幫助等正面作用,但這終究是輔、修飾性的,不是提高預(yù)報準確率的根本途徑,且效果難以具體量化。

尤其需要強調(diào)的是,以在預(yù)報準確率方面趕上世界先進水平為目標的氣象工作者,絕不能因擁有了大數(shù)據(jù)這種退而求其次的方法而放棄對掌握氣象規(guī)律這一理想事業(yè)的追求。而且,這一追求的最終實現(xiàn),只能靠觀測數(shù)據(jù)和產(chǎn)品在時空密度和質(zhì)量上的不斷提高,以及科學(xué)家們辛勤的分析研究。由于就數(shù)據(jù)而言,對提高預(yù)報準確率貢獻價值最高的仍然是氣象觀測數(shù)據(jù)及產(chǎn)品,因此研制出高質(zhì)量、高時空密度的氣象觀測產(chǎn)品數(shù)據(jù),便仍將是提高預(yù)報準確率以及氣象科學(xué)研究最重要的基礎(chǔ)性工作。至于科學(xué)研究工作,沒有捷徑可走,在這里“工匠精神”永遠不會過時。

(三) 氣象大數(shù)據(jù)的價值分析

上文“氣象大數(shù)據(jù)與預(yù)報準確率”的分析并非意味著大數(shù)據(jù)在氣象部門無所作為,而只是想說明,大數(shù)據(jù)并非包治百病的靈丹妙藥,而是一個宏觀上可在全社會產(chǎn)生巨大正面效益、但也存在一些效益不甚顯著區(qū)域的、實實在在的思維理念和工作方法。說到底,氣象部門之所以引進大數(shù)據(jù)理念和方法,并非為了大數(shù)據(jù)而大數(shù)據(jù),而是為了解決實際工作中存在的問題。因此,氣象大數(shù)據(jù)必須以業(yè)務(wù)和工作需求為引領(lǐng)。當業(yè)務(wù)或工作中出現(xiàn)的問題沒有合適的數(shù)據(jù)信息,或者雖有數(shù)據(jù)但常規(guī)處理方法無助于問題的解決時,氣象大數(shù)據(jù)也許是一種可以嘗試的解決途徑。通過“氣象行業(yè)大數(shù)據(jù)”中的各類數(shù)據(jù),在履行其各自的直接業(yè)務(wù)目標之外,使各類數(shù)據(jù)間彼此有機融合并協(xié)同分析,是能夠發(fā)掘出新的數(shù)據(jù)價值、信息價值和知識價值,從而推動業(yè)務(wù)的發(fā)展和管理的進步,不斷提高氣象部門的工作品質(zhì)的。氣象部門內(nèi)層級堆疊、工作效率不高的問題長期以來有目共睹,“智慧氣象”中“精細的科學(xué)管理”,即可從打通部門藩籬、消除管理信息孤島開始。通過管理信息的整合,優(yōu)化管理流程,增強職能部門間的工作協(xié)同,提高管理效率。通過充分挖掘和發(fā)揮出管理信息應(yīng)用的價值來提高管理工作效率,進而提高氣象部門整體的工作效率,通過大幅提高工作效率來創(chuàng)造價值,等等。

“氣象行業(yè)大數(shù)據(jù)”產(chǎn)生自氣象部門,是氣象部門賴以運轉(zhuǎn)的最主要資源,同時也是氣象部門各項工作的記錄載體,在所有數(shù)據(jù)資源中,它所含有的氣象信息最濃;故其應(yīng)用領(lǐng)域首先應(yīng)在于氣象部門業(yè)務(wù)工作的有效運轉(zhuǎn),其次才是社會服務(wù)?!皻庀笮袠I(yè)大數(shù)據(jù)”潛在價值的挖掘和發(fā)揮,也應(yīng)當以提高氣象部門工作能力為首要目標。用好“氣象行業(yè)大數(shù)據(jù)”,是開展氣象大數(shù)據(jù)工作的重要內(nèi)容和檢驗指標。

與此同時,“氣象行業(yè)大數(shù)據(jù)”與“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”之間的有效融合,有可能大幅提高氣象觀探測的時空密度。物聯(lián)網(wǎng)技術(shù)的有效應(yīng)用,可以使“氣象行業(yè)大數(shù)據(jù)”中專業(yè)氣象探測的時空分辨率變得富有彈性,以更加有效地應(yīng)對各種業(yè)務(wù)需求和社會服務(wù)需求。此外,高時空分辨率的探測數(shù)據(jù)也可為氣象科學(xué)家發(fā)現(xiàn)新的大氣運動機理和客觀規(guī)律提供前所未有的數(shù)據(jù)資源。

就應(yīng)用對象及范圍而言,“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”中氣象要素數(shù)據(jù)的產(chǎn)生是與搭載傳感儀器的擁有者――人――密切相關(guān)的,其所沉積下來的信息中包含有珍貴的人類活動痕跡。凡人跡所至且移動通信可覆蓋之地,均有可能成為“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”的數(shù)據(jù)源。雖然其傳感器搭載體的形式各異,探測環(huán)境也很不規(guī)范,但也正因為其搭載體擁有者是人,可放置或出入于各種人類活動場所,從餐廳到曠野、從巷道到影院、從居所到河畔,皆可隨時對各種場所進行氣象基本要素探測,這為氣象服務(wù)的精細化、專業(yè)化和個性化提供了“氣象行業(yè)大數(shù)據(jù)”所難以甚至無法提供的現(xiàn)場氣象要素數(shù)據(jù)。此外,利用已廣泛布設(shè)的非氣象監(jiān)測設(shè)備所采集的信息,通過分析得出所需要的氣象要素,以彌補專業(yè)氣象探測設(shè)備無法獲得的探測信息,是一條值得深入探索的途徑,GPS/MET的發(fā)掘和廣泛應(yīng)用就是一個典型的成功事例。可以預(yù)期,“氣象互聯(lián)網(wǎng)大數(shù)據(jù)”與“氣象行業(yè)大數(shù)據(jù)”以及其它行業(yè)大數(shù)據(jù)之間的有效融合,可在氣象社會服務(wù)領(lǐng)域開辟出空前繁榮的氣象服務(wù)新局面。

總之,數(shù)據(jù)是為應(yīng)用服務(wù)的,氣象大數(shù)據(jù)必須將業(yè)務(wù)和工作做為最主要的引領(lǐng)。氣象大數(shù)據(jù)戰(zhàn)略的首要內(nèi)容,不是數(shù)據(jù)的收集、數(shù)據(jù)源的拓展以及海量數(shù)據(jù)的管理技術(shù),而是氣象工作的持續(xù)創(chuàng)新。在技術(shù)創(chuàng)新、原理創(chuàng)新、概念創(chuàng)新和思想創(chuàng)新的氛圍中,不斷涌現(xiàn)出新的應(yīng)用,根據(jù)新應(yīng)用在信息和數(shù)據(jù)需求方面的特點,充分發(fā)掘現(xiàn)有數(shù)據(jù)資源的價值,同時有針對性地尋找并拓展新的數(shù)據(jù)資源,合理運用大數(shù)據(jù)有關(guān)技術(shù),處理并提煉出新的有價值的信息,以推進創(chuàng)新的不斷實現(xiàn)。與此同時,由于創(chuàng)新本身是不同概念之間的有機連接和融合,多角度的觀察會增加概念連接的機會,大數(shù)據(jù)所固有的關(guān)聯(lián)分析以及由此產(chǎn)生的相關(guān)事物的現(xiàn)象信息,對開拓概念連接的范圍會有所幫助,對氣象部門在新形勢下的創(chuàng)新當有所裨益。于是,初始創(chuàng)新啟動大數(shù)據(jù)應(yīng)用,大數(shù)據(jù)應(yīng)用促進新的創(chuàng)新――這應(yīng)該是氣象大數(shù)據(jù)戰(zhàn)略的基本輪廓。

三、開展氣象大數(shù)據(jù)工作的前提條件

(一) 現(xiàn)有氣象數(shù)據(jù)的梳理

長期以來,人們普遍將氣象觀測數(shù)據(jù)及產(chǎn)品、以及少量的氣象服務(wù)產(chǎn)品做為氣象數(shù)據(jù)的全部,以現(xiàn)代信息化理論和實踐來考量,這無疑是片面的。氣象部門是一個整體,其有效運轉(zhuǎn)除需要觀測數(shù)據(jù)外,財務(wù)、人事、績效、資產(chǎn)甚至設(shè)備狀態(tài)信息等數(shù)據(jù),都是不可或缺的重要信息資源,應(yīng)當無一遺漏地納入氣象數(shù)據(jù)的范疇。事實上,由于長期以來對氣象數(shù)據(jù)內(nèi)涵理解的局限性,使得部門內(nèi)對氣象數(shù)據(jù)的關(guān)注點長期聚焦在氣象觀測數(shù)據(jù),相應(yīng)的規(guī)范標準亦多以觀測數(shù)據(jù)為對象,其它類別的數(shù)據(jù)則所涉甚少,甚至沒有涉及。這種不平衡導(dǎo)致了這些其它類別數(shù)據(jù)在管理上的各自為政、規(guī)格上的無章可循、信息間的彼此隔離、質(zhì)量上的參差不齊、以及使用上的困難無序和低效。即便是長期受到關(guān)注的氣象觀測數(shù)據(jù),存在問題亦不可忽視,以數(shù)據(jù)質(zhì)量為例,眾所周知,在周邊環(huán)境未發(fā)生非氣象因素改變的情況下,探測數(shù)據(jù)的質(zhì)量直接取決于傳感設(shè)備自身狀態(tài)的正常與否。然而到目前為止,除氣象衛(wèi)星和天氣雷達等高端探測儀器外,其它如地面自動氣象站等,沒有探測設(shè)備自身狀態(tài)信息的獲取途徑,探測設(shè)備狀態(tài)的判定需要依靠其所采集的氣象要素是否合理、是否超出理論極限范疇等被動式手段來完成,于是出現(xiàn)兩個問題:其一,對于真實的極端天氣事件(如局地特大暴雨)數(shù)據(jù),有可能因其數(shù)值超出氣候極值而導(dǎo)致數(shù)據(jù)正確性的誤判;其二,故障設(shè)備從開始發(fā)生故障到被檢測出來的這段時間難以確定,從而導(dǎo)致這段時間內(nèi)觀測數(shù)據(jù)的質(zhì)量無法保證。由此亦可推論,探測設(shè)備狀態(tài)信息是相當重要的業(yè)務(wù)數(shù)據(jù),但遺憾的是,該類數(shù)據(jù)至今既無相關(guān)標準,也未正式納入氣象數(shù)據(jù)的管理范疇。

需要指出的是,不少技術(shù)人士將所有氣象數(shù)據(jù)納入統(tǒng)一管理平臺(如:Cimiss)視為氣象數(shù)據(jù)治理的完成,這無疑也是片面的。事實上,如果上述諸如數(shù)據(jù)定義、數(shù)據(jù)分類/分級、數(shù)據(jù)分布、數(shù)據(jù)操作等諸多問題沒有解決,氣象數(shù)據(jù)沒有經(jīng)過科學(xué)的梳理和配置,所有氣象數(shù)據(jù)在形式上的匯聚便起不到高效管理、有效應(yīng)用和長期支持業(yè)務(wù)發(fā)展(包括業(yè)務(wù)變更)的作用。

(二) 氣象數(shù)據(jù)的規(guī)劃和治理

要搞好氣象大數(shù)據(jù),首先要管理好做為氣象部門核心資源的“氣象行業(yè)大數(shù)據(jù)”(亦即所謂“氣象數(shù)據(jù)”)。在此,一個極為重要的基礎(chǔ)性工作――對氣象數(shù)據(jù)的全面規(guī)劃和治理――是無法跨越的。

氣象部門的所有各項工作中,無時無刻不充滿著信息的產(chǎn)生、流動和使用。要使每個單位內(nèi)部、單位之間、單位與外部門單位的頻繁、復(fù)雜的信息流暢通,充分發(fā)揮信息資源的作用,不進行統(tǒng)一的、全面的規(guī)劃是不可能的。氣象數(shù)據(jù)規(guī)劃,實質(zhì)上就是氣象部門的信息資源規(guī)劃,是對氣象部門日常運轉(zhuǎn)所需要的各種信息,從采集、處理、傳輸?shù)绞褂玫壬芷诟鱾€環(huán)節(jié)的全面規(guī)劃。其目的,是通過有效管理氣象數(shù)據(jù),實現(xiàn)氣象部門內(nèi)外數(shù)據(jù)流的暢通以及數(shù)據(jù)資源的有效利用,進而達到工作的流暢、業(yè)務(wù)的融合和整體的協(xié)同,從而提高氣象部門的工作效率和效益。通過氣象數(shù)據(jù)規(guī)劃,可以梳理業(yè)務(wù)流程和管理流程,厘清信息需求、建立部門行業(yè)的信息標準和信息系統(tǒng)模型,并據(jù)此來繼承、整合、優(yōu)化、改進乃至再造業(yè)務(wù)流程及業(yè)務(wù)系統(tǒng),從而積極穩(wěn)步地推進氣象大數(shù)據(jù)戰(zhàn)略。該項工作的長時期缺位,已經(jīng)給氣象部門各項工作造成了十分被動的局面。

在這里,氣象數(shù)據(jù)規(guī)劃是整體梳理、謀劃和設(shè)計,氣象數(shù)據(jù)治理則是具體實施執(zhí)行。

所謂數(shù)據(jù)治理,就是使氣象數(shù)據(jù)自產(chǎn)生的那一刻開始,經(jīng)歷的采集、傳輸、處理、存儲、操作以及質(zhì)量和安全保障等生命周期諸多環(huán)節(jié)中的每一個環(huán)節(jié),都處在一個統(tǒng)一、自洽、協(xié)同的規(guī)則之中,以使得氣象數(shù)據(jù)這一部門和全社會寶貴資產(chǎn)始終處于正確有效的管理之下。換句話說,氣象數(shù)據(jù)的治理就是治理氣象數(shù)據(jù)的政策、方法、措施和具體落實。

貫徹氣象數(shù)據(jù)治理,除先進的理念外,還需要有配套的組織架構(gòu)、原則、過程和規(guī)則,以確保數(shù)據(jù)管理的各項職能得到正確的履行。

氣象大數(shù)據(jù)的工作形態(tài)就是數(shù)據(jù)資源的開發(fā)利用,做為良好的數(shù)據(jù)資源開發(fā)利用的基礎(chǔ),數(shù)據(jù)規(guī)劃是綱領(lǐng),而數(shù)據(jù)治理則是貫徹數(shù)據(jù)規(guī)劃的具體進程。

(三) 數(shù)據(jù)意識的逐步培育

提高全部門的數(shù)據(jù)意識,是開展氣象大數(shù)據(jù)的基礎(chǔ)。

數(shù)據(jù)是精準文化的核心,精準靠數(shù)據(jù)來表述。對創(chuàng)新而言,所有的成功都是小概率事件,唯有每一步都追求精確方才可能達到。同時,科學(xué)和精準使得思維邏輯得以嚴謹,以嚴謹邏輯表述的思維成果,確保了推理的可靠性,使后人可在前人思想成果的基礎(chǔ)上進一步思考和拓展;嚴謹?shù)乃季S成果成為可組織、可利用的資源,科學(xué)成果因之而得以積累,并最終發(fā)展成長。技術(shù)的精準和步驟的嚴謹使得成熟技術(shù)的品質(zhì)更高,也使得這些技術(shù)得以方便地利用和重組,而成熟技術(shù)的再重組是科技創(chuàng)新的重要形態(tài)之一。此外,思維的嚴謹性還決定了人們科學(xué)研究的深度。在信息時代,鮮見有采用粗放、籠統(tǒng)、馬虎和粗枝大葉方式能夠持久成功的事例。沒有數(shù)據(jù)意識就沒有現(xiàn)代科技,在全氣象部門培養(yǎng)數(shù)據(jù)與精準意識已是當務(wù)之急,科學(xué)與精確應(yīng)當成為氣象部門的工作信條和文化素養(yǎng),是實現(xiàn)氣象現(xiàn)代化最根本的基礎(chǔ)條件。

(四) 必要的人才基礎(chǔ)條件

所有的工作,都是以人的思維成果而指導(dǎo)的。大數(shù)據(jù)技術(shù)只是眾多工具中的一類,工具沒有自行主動解決問題的能力,工具不可能解決連人都沒有想清楚的問題,解決問題的辦法必須靠人的思維;人想清楚了,則相應(yīng)的處理流程可由信息系統(tǒng)重復(fù)運作,以提高工作效率。如果一項工作,連人自己都還沒有想清楚,則此時的大數(shù)據(jù)非但不能幫忙,反而可能會把事情搞得一團糟。因此,氣象大數(shù)據(jù)應(yīng)用的開展,人才條件是決定其成敗的要素之一。

具體地說,實施氣象大數(shù)據(jù)應(yīng)用,除上述幾項基礎(chǔ)工作外,在人才隊伍方面還需具備以下2個基礎(chǔ)條件:

1. 建立起對應(yīng)于大數(shù)據(jù)管理運營的數(shù)據(jù)管理中心的組織架構(gòu)。沒有一個相對完整和專業(yè)的數(shù)據(jù)管理團隊,是難以發(fā)揮出大數(shù)據(jù)分析的功效的。

2. 建立起一支精干的數(shù)據(jù)分析團隊,并擁有一個靈活適用的數(shù)據(jù)分析技術(shù)平臺。

此外,開展氣象大數(shù)據(jù)工作,可能會遇到許多意想不到的困難,如:算法和數(shù)據(jù)來源問題。如前所述,所有大數(shù)據(jù)應(yīng)用的數(shù)據(jù)來源都是來自于互聯(lián)網(wǎng)的替代數(shù)據(jù),而由于數(shù)據(jù)源非針對該應(yīng)用所采集,該應(yīng)用所需要的內(nèi)容可能同時存在于不同的數(shù)據(jù)源之中,且存在的形態(tài)和格式各異:同樣是分析輿情,騰訊微信大數(shù)據(jù)和百度大數(shù)據(jù)的分析方法可能完全不同。面對不同的數(shù)據(jù)源,需要不同的信息提取算法。因此,合適的數(shù)據(jù)源和合適的分析算法,是開展氣象大數(shù)據(jù)應(yīng)用首先需要解決的問題。而氣象部門在這方面,目前尚缺乏相應(yīng)的專業(yè)人才和團隊。因此,對于氣象部門而言,利用他人的數(shù)據(jù)開展大數(shù)據(jù)應(yīng)用,對可能面臨的困難,需要做好一定的心理準備。

四、氣象大數(shù)據(jù)中心建設(shè)問題

(一) 應(yīng)當是氣象行業(yè)大數(shù)據(jù)中心

開展氣象大數(shù)據(jù)工作,基礎(chǔ)設(shè)施環(huán)境(即:氣象大數(shù)據(jù)中心)的建設(shè)問題,是本文必須正面回答的另一個問題,因為海量數(shù)據(jù)的處理需要相當規(guī)模的存儲和計算資源予以支持。

上文已述,氣象大數(shù)據(jù)由“行業(yè)”和“互聯(lián)網(wǎng)”兩部分來源構(gòu)成。筆者認為,氣象大數(shù)據(jù)中心應(yīng)當是以存儲管理行業(yè)大數(shù)據(jù)為主要目標,即:氣象大數(shù)據(jù)中心應(yīng)當是氣象行業(yè)大數(shù)據(jù)中心。理由如下:

氣象行業(yè)大數(shù)據(jù)中的各類數(shù)據(jù),都是由氣象部門業(yè)務(wù)或管理系統(tǒng)產(chǎn)生,以服務(wù)于氣象業(yè)務(wù)或工作為首要目標的。根據(jù)屬地化管理原則,規(guī)范管理這些數(shù)據(jù),并負責這些數(shù)據(jù)的社會化共享服務(wù),是氣象部門的職責。因此氣象大數(shù)據(jù)中心所管轄的數(shù)據(jù)中,必須包含氣象行業(yè)大數(shù)據(jù)。同理,由于氣象互聯(lián)網(wǎng)大數(shù)據(jù)中的所有數(shù)據(jù)皆非產(chǎn)自氣象部門,同樣根據(jù)屬地化管理原則,氣象部門沒有職責和義務(wù)存儲管理這些非氣象部門產(chǎn)生的數(shù)據(jù)。

在目前數(shù)據(jù)量急劇爆發(fā)的背景下,輕率地將體量碩大的互聯(lián)網(wǎng)大數(shù)據(jù)整體搬移到自己的屬地后再進行處理,不是明智的舉動。按照業(yè)界“算法找數(shù)據(jù)”的原則,應(yīng)盡可能采用諸如與數(shù)據(jù)源擁有方建立協(xié)作聯(lián)盟、租用對方一定規(guī)?;A(chǔ)資源等方法,達到在數(shù)據(jù)源近旁完成處理工作的目的,以減少海量數(shù)據(jù)整體搬遷所造成的高昂代價,并提高工作時效。即:對于互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用而言,應(yīng)盡可能采取“就近處理”的方法;在無法就近完成所有處理的情況下,也應(yīng)盡量設(shè)法采用“提取”的方法,將有用的信息從數(shù)據(jù)源中提取回自己的屬地分析處理,切不可輕易采用“數(shù)據(jù)找算法”的陳規(guī)陋習,將數(shù)據(jù)源整體復(fù)制到自己的屬地,除非萬不得已。這方面的工作需要慎重籌劃,以免被昂貴的數(shù)據(jù)搬遷和數(shù)據(jù)更新成本所壓垮。

總之,由于氣象互聯(lián)網(wǎng)大數(shù)據(jù)與氣象行業(yè)大數(shù)據(jù)相比,無論在規(guī)模上,還是在管理時段上都難以較為準確地預(yù)估,將其納入氣象大數(shù)據(jù)中心的管理內(nèi)容之一,會對大數(shù)據(jù)中心的設(shè)計和管理帶來一系列極其復(fù)雜的不確定因素。因此,氣象大數(shù)據(jù)中心在建設(shè)和使用初期,應(yīng)以氣象行業(yè)大數(shù)據(jù)為主要管理對象,并在氣象互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用中盡可能避免海量數(shù)據(jù)的搬遷。與此同時,大數(shù)據(jù)中心在設(shè)計和實際操作過程中可以預(yù)留一定規(guī)模的基礎(chǔ)資源,為在極端情況下互聯(lián)網(wǎng)大數(shù)據(jù)的載入和處理預(yù)留一定的管理空間和能力。

綜上所述,第一,管理氣象行業(yè)大數(shù)據(jù)是氣象大數(shù)據(jù)中心的職責。第二,對于互聯(lián)網(wǎng)大數(shù)據(jù)而言,大數(shù)據(jù)中心既沒有義務(wù)、也應(yīng)盡可能避免對其進行長時間管理。所以,氣象大數(shù)據(jù)中心應(yīng)當是氣象行業(yè)大數(shù)據(jù)中心。

(二) 氣象大數(shù)據(jù)中心的形態(tài)和分布

1. 氣象行業(yè)大數(shù)據(jù)中心同時應(yīng)當是氣象云中心

就應(yīng)用效果而言,在資源充沛且數(shù)據(jù)處于規(guī)范管理的前提下,數(shù)據(jù)的集約化程度越高,應(yīng)用的效果越理想。因此,氣象大數(shù)據(jù)中心應(yīng)當是氣象數(shù)據(jù)匯聚、規(guī)范化管理且資源十分充沛的數(shù)據(jù)中心。云計算中心是大數(shù)據(jù)中心最好的物理形態(tài),大數(shù)據(jù)中心應(yīng)以云計算中心為基礎(chǔ)平臺,這在業(yè)界已形成共識,氣象大數(shù)據(jù)中心也不例外。所以,氣象大數(shù)據(jù)中心應(yīng)當是一個組織機構(gòu)概念,邏輯上相對獨立,而其實際的物理基礎(chǔ)設(shè)施應(yīng)當是氣象云中心,是氣象云中心上的一個具體業(yè)務(wù)應(yīng)用。

需要進一步說明的是,對氣象大數(shù)據(jù)中心的規(guī)模而言,其中的行業(yè)數(shù)據(jù)的增長規(guī)模處在氣象部門掌控之中,基本上可以預(yù)估。但如果將互聯(lián)網(wǎng)大數(shù)據(jù)的應(yīng)用場景也考慮在內(nèi),預(yù)留可充分應(yīng)對極端情況下互聯(lián)網(wǎng)數(shù)據(jù)源大舉載入時的支撐資源,由于數(shù)據(jù)源對象的未知性,其相應(yīng)的規(guī)模是難以預(yù)先測算的,偏大則可能導(dǎo)致資源的長時間閑置,偏小則可能屆時無法發(fā)揮支撐作用。較為可行的解決方案之一是采用專有云形式,即:選擇資源規(guī)模大、公共安全措施完備、專業(yè)水平高、服務(wù)信譽好且價格相對合理的云計算中心,在其上長期租賃相應(yīng)規(guī)模的基礎(chǔ)設(shè)施資源作為氣象云的基礎(chǔ)設(shè)施,其中氣象大數(shù)據(jù)中心的資源需求規(guī)??苫緟⒄諝庀笮袠I(yè)大數(shù)據(jù)的存儲管理規(guī)模來進行預(yù)估。與此同時,與該云計算中心簽訂相應(yīng)的服務(wù)合同,承諾在氣象大數(shù)據(jù)中心遇到特殊情況(如極端情況下海量互聯(lián)網(wǎng)數(shù)據(jù)的大批載入)時,該云中心可及時擴充氣象大數(shù)據(jù)中心的基礎(chǔ)資源租賃規(guī)模,并在應(yīng)用結(jié)束后收回這些臨時租賃的基礎(chǔ)資源。

2. 大數(shù)據(jù)中心的分布

筆者于前文已討論過,未來的氣象云中心最終將以1+2或1+3等數(shù)量有限、地理分布相對合理的形式長期存在。且專有云較之私有云而言,是更為合理的氣象云形態(tài)。限于篇幅,其理由不再重復(fù)闡述。

(三) 盡早開展應(yīng)用研究工作

應(yīng)及早開展針對互聯(lián)網(wǎng)大數(shù)據(jù)在氣象部門各領(lǐng)域創(chuàng)新應(yīng)用的研究工作。目前這項工作在氣象部門除個別先行單位(如公共氣象服務(wù)中心)外,基本處于空白狀態(tài),是一片未開墾的處女地。盡早進行大數(shù)據(jù)基礎(chǔ)知識和技能的儲備,對工作的順利開展有益無損。同時,應(yīng)積極籌備組建相關(guān)的專業(yè)化團隊,以期盡早具備如下能力:

數(shù)據(jù)資源發(fā)現(xiàn)能力:熟悉互聯(lián)網(wǎng)上各種數(shù)據(jù)資源以及數(shù)據(jù)交易市場的業(yè)務(wù)動態(tài),熟悉數(shù)據(jù)資產(chǎn)的價值評估,可在部門用戶提出數(shù)據(jù)資源需求時,及時提供互聯(lián)網(wǎng)數(shù)據(jù)資源的咨詢服務(wù),推薦合適的數(shù)據(jù)資源,以及資源的基本情況。

數(shù)據(jù)獲取能力:具備在正常情況下,通過正規(guī)途徑,以技術(shù)手段及時獲取指定數(shù)據(jù)源中所有數(shù)據(jù)的能力。

數(shù)據(jù)分析能力:具備在收集互聯(lián)網(wǎng)數(shù)據(jù)的基礎(chǔ)上,針對應(yīng)用目標以及數(shù)據(jù)源的特點,提出相應(yīng)的分析模型,指導(dǎo)并最終完成對互聯(lián)網(wǎng)數(shù)據(jù)的整理和分析,以完成應(yīng)用目標中各項研究、評估和預(yù)測的能力。

數(shù)據(jù)算法實現(xiàn):根據(jù)分析模型及數(shù)據(jù)源特點,形成數(shù)據(jù)分析處理軟件,并完成數(shù)據(jù)處理。

分析平臺:擁有分析模型建立、處理軟件生成以及分析結(jié)果可視化展現(xiàn)的技術(shù)平臺。

應(yīng)適時成立相應(yīng)機構(gòu)(如:氣象互聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用研究中心等),專門從事這方面的研究和應(yīng)用工作。

五、穩(wěn)步推進氣象大數(shù)據(jù)戰(zhàn)略

(一) 全面認識氣象大數(shù)據(jù)

在積極探索創(chuàng)新應(yīng)用的同時,應(yīng)冷靜分析氣象大數(shù)據(jù)的特點和可能的適用范圍,基本明了其能力邊界,做到心中有數(shù)。既不被外界過度宣傳所裹挾,也不被內(nèi)部守舊力量所羈絆。積極而穩(wěn)妥,慎重而不裹足不前。應(yīng)當明白,目前國家所倡導(dǎo)的大數(shù)據(jù)戰(zhàn)略,與其說是為了推行充分挖掘數(shù)據(jù)資源價值的工作方法,不如說是一種工作思維和工作方式的改進和補充,是一場全社會文化素養(yǎng)的改良和變革。通過對大數(shù)據(jù)不斷深入的應(yīng)用,持續(xù)改進全社會的生產(chǎn)質(zhì)量、產(chǎn)品質(zhì)量、服務(wù)質(zhì)量和生活質(zhì)量。

因此,不必過度介意氣象大數(shù)據(jù)在某些特定領(lǐng)域內(nèi)(如提高預(yù)報準確率等)作用的有限。大數(shù)據(jù)不是萬能的,正如信息化不是萬能的一樣,不可能指望單憑推行大數(shù)據(jù)就能解決所有問題。充分利用一切可以利用的數(shù)據(jù)資源,不斷創(chuàng)新、不斷改進氣象部門各項工作,倡導(dǎo)和發(fā)揚工匠精神,使各項工作更加科學(xué)化和精細化,就已達到了氣象大數(shù)據(jù)戰(zhàn)略的基本目標。

此外,氣象大數(shù)據(jù)應(yīng)當以應(yīng)用為主導(dǎo),以業(yè)務(wù)為主導(dǎo),以改善各項工作為主導(dǎo),更應(yīng)該以技術(shù)、業(yè)務(wù)、服務(wù)和管理創(chuàng)新為主導(dǎo)。應(yīng)當使全部門明了:開展氣象大數(shù)據(jù)工作不等于在各地開展數(shù)據(jù)中心基礎(chǔ)建設(shè),更不等于在各地開展數(shù)據(jù)庫建設(shè)。此外,開展氣象大數(shù)據(jù)工作,應(yīng)力求基礎(chǔ)工作先行、專業(yè)團隊建設(shè)先行和應(yīng)用研究先行。

(二) 保持清醒、力戒浮躁

我國政府多年前便已開始倡導(dǎo)科學(xué)發(fā)展的理念,但目前全社會急于求成的心理依然非常普遍,似是而非且激動人心的宣傳口號此起彼伏,反映出一些人的浮躁心態(tài)。氣象大數(shù)據(jù)工作的開展,不宜采用運動的方式,而應(yīng)該在充分營造創(chuàng)新氛圍的前提下,由創(chuàng)新引導(dǎo)氣象大數(shù)據(jù)的具體應(yīng)用,循序漸進,待深入到一定程度后,再由大數(shù)據(jù)應(yīng)用逐步推動創(chuàng)新,從而形成創(chuàng)新引導(dǎo)大數(shù)據(jù)應(yīng)用,大數(shù)據(jù)應(yīng)用進一步推動創(chuàng)新的彼此互動的良性循環(huán)局面。從過程上看,氣象大數(shù)據(jù)的開展應(yīng)當水到渠成,過度的宣傳、強力的行政推動和盲目魯莽的基礎(chǔ)建設(shè)無異于揠苗助長,對大數(shù)據(jù)的應(yīng)用發(fā)展有損無益。切勿被“搶占制高點”等宣傳口號所蠱惑,在被某些善良單純的記者以及別有用心的企業(yè)家鼓動得顯然有些過熱的大數(shù)據(jù)風潮中,保持頭腦的冷靜,力戒內(nèi)心的浮躁,顯得尤為可貴。

六、結(jié)語