從IT時代到DT時代,大數(shù)據(jù)已成為一場革命,正在改變?nèi)藗兊纳睢⒐ぷ骱退季S方式。大數(shù)據(jù)標準研制作為產(chǎn)業(yè)發(fā)展基礎,目前仍處于起步階段。為實現(xiàn)數(shù)據(jù)間無歧義溝通,元數(shù)據(jù)標準研究與應用顯得更為迫切。
在研國標有10項
大數(shù)據(jù)領域的標準化工作是支撐大數(shù)據(jù)產(chǎn)業(yè)發(fā)展和應用的重要基礎。《中國電子報》記者近日從全國信標委大數(shù)據(jù)標準工作組第二次會議上獲悉,目前大數(shù)據(jù)相關標準研制還處于起步階段。國際上有4大標準化組織針對大數(shù)據(jù)進行專門研究,分別是ISO/IEC JTC1 SC32、ISO/IEC JTC1 WG9、ITU和NIST。
為了推動和規(guī)范我國大數(shù)據(jù)產(chǎn)業(yè)的快速發(fā)展,建立大數(shù)據(jù)的產(chǎn)業(yè)鏈,與國際標準接軌,我國在2014年12月正式成立了全國信息技術標準化技術委員會大數(shù)據(jù)標準工作組(以下簡稱工作組)。工作組主要負責制定和完善我國大數(shù)據(jù)領域標準體系,組織開展大數(shù)據(jù)相關技術和標準的研究,申報國家、行業(yè)標準,承擔國家、行業(yè)標準制修訂計劃任務,宣傳、推廣標準實施,組織推動國際標準化活動。目前,工作組正在研制的國家標準有10項,其中《信息技術大數(shù)據(jù)術語》和《信息技術大數(shù)據(jù)技術參考模型》兩項國家標準已經(jīng)完成相應的草案,準備進入征求意見階段。
“目前已有138家單位申請成為工作組成員。”中國電子技術標準化研究院副院長高林表示,“工作組下一步將繼續(xù)完善和維護工作組工作平臺,加強元數(shù)據(jù)、數(shù)據(jù)分類、數(shù)據(jù)開放共享等方面的標準化研究,同時將積極開展測試評價、認證等相關準備工作。”
值得一提的是,在研究提出大數(shù)據(jù)技術框架的基礎上,結合數(shù)據(jù)全周期管理,數(shù)據(jù)自身標準化特點,當前各領域推動大數(shù)據(jù)應用的初步實踐,以及未來大數(shù)據(jù)發(fā)展的趨勢,工作組提出了大數(shù)據(jù)標準體系框架。大數(shù)據(jù)標準體系由五個類別的標準組成,分別為:基礎標準、技術標準、產(chǎn)品和平臺標準、大數(shù)據(jù)安全標準及應用和服務標準。
有專家認為,針對大數(shù)據(jù),我國在數(shù)據(jù)管理、云計算、信息安全等方面,已經(jīng)發(fā)布和在研一些標準,適用于大數(shù)據(jù)環(huán)境,提供了一定的基礎,但是缺乏標準化整體規(guī)劃;數(shù)據(jù)分析、數(shù)據(jù)安全、數(shù)據(jù)質(zhì)量管理等技術標準,數(shù)據(jù)處理平臺、開放數(shù)據(jù)集、數(shù)據(jù)服務平臺類新型產(chǎn)品和服務形態(tài)的標準較為缺乏,亟須研制。
需加強元數(shù)據(jù)標準研究
近年來,大數(shù)據(jù)技術已經(jīng)開始步入高速發(fā)展階段,國內(nèi)外從事大數(shù)據(jù)方面研究和服務的公司越來越多,行業(yè)分得越來越細。不過,在行業(yè)應用中,由于缺乏統(tǒng)一的數(shù)據(jù)描述,數(shù)據(jù)在解釋、同步、轉換過程中時常會存在歧義,數(shù)據(jù)擁有者不能及時地按業(yè)務要求提供正確的數(shù)據(jù)時有發(fā)生。因此,在大數(shù)據(jù)時代,借助于元數(shù)據(jù)了解數(shù)據(jù)元素含義和上下文的需求越來越強烈。
記者了解到,ISO/IEC JTC1 SC32下設4個工作組研究不同領域的標準研制,其中就包括元數(shù)據(jù)。其范圍涉及研制開發(fā)和維護有利于規(guī)范和管理的元數(shù)據(jù)、元模型和本體的標準,此類標準有助于理解和共享數(shù)據(jù)、信息和過程,支持互操作性,電子商務以及基于模型和基于服務的開發(fā),包括:建議用于規(guī)定和管理元數(shù)據(jù)、元模型和本體的框架;規(guī)定和管理元數(shù)據(jù)、元模型和本體;規(guī)定和管理過程、服務和行為數(shù)據(jù);開發(fā)管理元數(shù)據(jù)、元模型和本體的機制,包括注冊和存儲;開發(fā)交換元數(shù)據(jù)、元模型和本體的機制,包括基于互聯(lián)網(wǎng)、局域網(wǎng)等的語義。
對于我國元數(shù)據(jù)標準制定,有專家就指出,我國迫切需要加強元數(shù)據(jù)標準或元數(shù)據(jù)模型的研究與應用,健全完善元數(shù)據(jù)標準規(guī)范及元數(shù)據(jù)模型。需要充分結合政府各部門現(xiàn)有數(shù)據(jù)資源建設情況,針對當前政務大數(shù)據(jù)資源、科技大數(shù)據(jù)資源、電子商務大數(shù)據(jù)資源等重點領域,研制元數(shù)據(jù)標準或統(tǒng)一的元數(shù)據(jù)標準模型框架,使得大數(shù)據(jù)向著標準化、條理化、脈絡化方向發(fā)展,實現(xiàn)無歧義溝通、理解和使用數(shù)據(jù)。解決當前數(shù)據(jù)在交易、使用等過程中存在的問題,更好地對數(shù)據(jù)進行管控,挖掘大數(shù)據(jù),發(fā)揮數(shù)據(jù)價值。
相關鏈接
大數(shù)據(jù)標準體系中五類標準
基礎標準
基礎標準是指為整個標準體系提供包括總則、術語和參考模型、元數(shù)據(jù)等基礎性標準。
技術標準
主要針對大數(shù)據(jù)相關技術進行規(guī)范。包括數(shù)據(jù)治理和數(shù)據(jù)質(zhì)量兩類標準。其中,數(shù)據(jù)治理標準主要針對數(shù)據(jù)的收集、預處理、分析、可視化、訪問、能力成熟度評價模型等方面進行規(guī)范。數(shù)據(jù)質(zhì)量標準主要針對數(shù)據(jù)質(zhì)量提出具體的管理要求和相應的指標要求,確保數(shù)據(jù)在產(chǎn)生、存儲、交換和使用等各個環(huán)節(jié)中的質(zhì)量,為大數(shù)據(jù)應用打下良好的基礎,包括質(zhì)量評價、數(shù)據(jù)溯源、質(zhì)量檢測等標準。
產(chǎn)品和平臺標準
主要針對大數(shù)據(jù)相關技術產(chǎn)品和應用平臺進行規(guī)范。包括關系型數(shù)據(jù)庫產(chǎn)品、非結構化數(shù)據(jù)管理產(chǎn)品、智能工具、可視化工具、數(shù)據(jù)處理平臺和測試規(guī)范六類標準。其中關系型數(shù)據(jù)庫產(chǎn)品標準針對存儲和處理大數(shù)據(jù)的關系型數(shù)據(jù)庫管理系統(tǒng),從訪問接口、技術要求、測試要求等方面進行規(guī)范,為關系型數(shù)據(jù)庫管理系統(tǒng)進行大數(shù)據(jù)的高端事務處理和海量數(shù)據(jù)分析提供支持;非結構化數(shù)據(jù)管理產(chǎn)品標準針對存儲和處理大數(shù)據(jù)的非結構化數(shù)據(jù)管理系統(tǒng),從參考架構、數(shù)據(jù)表示、訪問接口、技術要求、測試要求等方面進行規(guī)范;智能工具用來幫助用戶對大數(shù)據(jù)進行分析決策,包括ETL、OLAP、數(shù)據(jù)挖掘等工具,智能工具標準對智能工具的技術及功能進行規(guī)范;可視化工具是對大數(shù)據(jù)處理應用過程中所需用到的可視化展現(xiàn)工具的技術和功能要求進行規(guī)范;大數(shù)據(jù)平臺標準是針對大數(shù)據(jù)存儲、處理、分析系統(tǒng)從技術架構、建設方案、平臺接口等方面進行規(guī)范;測試規(guī)范針對大數(shù)據(jù)的產(chǎn)品和平臺給出測試方法和要求。
數(shù)據(jù)安全作為數(shù)據(jù)標準的支撐體系,貫穿于數(shù)據(jù)整個生命周期的各個階段。拋開傳統(tǒng)的網(wǎng)絡安全和系統(tǒng)安全,大數(shù)據(jù)時代下的數(shù)據(jù)安全標準主要包括通用要求、隱私保護兩類標準。
應用和服務標準
應用和服務類標準主要是針對大數(shù)據(jù)所能提供的應用和服務從技術、功能、開發(fā)、維護和管理等方面進行規(guī)范。主要包括開放數(shù)據(jù)集、數(shù)據(jù)服務平臺和領域應用數(shù)據(jù)三類標準。其中開放數(shù)據(jù)集標準主要對向第三方提供的開放數(shù)據(jù)包中的內(nèi)容、格式等進行規(guī)范;數(shù)據(jù)服務平臺標準是針對大數(shù)據(jù)服務平臺所提出的功能性、維護性和管理性的標準;領域應用數(shù)據(jù)指的是各領域根據(jù)其領域特性產(chǎn)生的專用數(shù)據(jù)標準,包括工業(yè)電子商務等領域。
分享到微信 ×
打開微信,點擊底部的“發(fā)現(xiàn)”,
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。