地質大數(shù)據(jù)資產管理方案研究(下)
2018年09月05日 10:15 3137次瀏覽 來源: 中國礦業(yè)報 分類: 地質礦業(yè) 作者: 劉榮梅 高振記 趙林林 楊燕
(3)按NGDA數(shù)據(jù)集生命周期成熟度評估
FGDC制定了5個成熟度指標評估地理空間數(shù)據(jù)生命周期中的7個階段。
根據(jù)用戶需求將數(shù)據(jù)的生命周期劃分為定義、清理與評估、獲取、訪問、維護、使用與評估、歸檔7個階段。
每個階段使用6個等級來評價,分別是:
0級:沒有任何措施
數(shù)據(jù)集未開發(fā)或不能滿足主要用戶的項目或業(yè)務需求。沒有考慮次要用戶、其他的或合作伙伴(利益相關者)的應用需求。數(shù)據(jù)集目前不是權威數(shù)據(jù),或者是權威數(shù)據(jù)集的一部分。沒有采用數(shù)據(jù)生命周期管理的任何一個階段進行管理。
1級:計劃或建設初期
數(shù)據(jù)集在初始計劃中且可部分滿足主要用戶的項目或業(yè)務需求。初步采用數(shù)據(jù)生命周期對數(shù)據(jù)進行管理。準備考慮次要用戶、其他的或合作伙伴(利益相關者)的應用需求。數(shù)據(jù)集的開發(fā)建設還處于初期階段。采用生命周期部分或有限階段進行管理。
2級:過渡或轉型階段
數(shù)據(jù)集滿足主要用戶的業(yè)務需求,并可被次要用戶適度使用。至少采用3個階段的數(shù)據(jù)生命周期管理??色@得階段性的資金、合作伙伴以及數(shù)據(jù)獲取等相關的支持。采用生命周期有限的階段進行管理實踐。
3級:管理或可預測的階段
數(shù)據(jù)集滿足主要用戶的大量業(yè)務需求,并被次要用戶廣泛使用。至少采用4個階段的數(shù)據(jù)生命周期管理。采用恰當且一致性的數(shù)據(jù)生命周期進行管理實踐。數(shù)據(jù)集在生命周期的不同階段與業(yè)務需求變化緊密結合,整體成熟度隨之變化。
4級:成熟或一致性階段
數(shù)據(jù)集滿足主要用戶和大多數(shù)次要用戶的所有業(yè)務需求。該數(shù)據(jù)集是主要用戶和次要用戶的權威數(shù)據(jù)資源。對未來的數(shù)據(jù)應用需求有著明確的規(guī)劃和實施方案。數(shù)據(jù)集在生命周期所有階段進行循環(huán)的支撐和審查。數(shù)據(jù)集完全按照生命周期全過程進行管理。
5級:優(yōu)化或公認階段
數(shù)據(jù)集幾乎滿足所有用戶的所有業(yè)務需求。該數(shù)據(jù)集是主要用戶和次要用戶的權威數(shù)據(jù)資源。數(shù)據(jù)集完全按照生命周期全過程進行管理。主要用戶和次要用戶對數(shù)據(jù)資料未來的應用需求有著明確的規(guī)劃和實施方案。
考慮到不斷變化的業(yè)務需求,數(shù)據(jù)集生命周期成熟度評估是反復進行的過程,定期重新評估可反應出數(shù)據(jù)集成熟度的變化趨勢。成熟度水平不會固定在一個等級水平,而是一個持續(xù)的變化過程,同時也表征了NGDA數(shù)據(jù)集如何滿足不斷變化的業(yè)務需求。
從2015年底完成的177個數(shù)據(jù)集的初始成熟度評估結果來看,大多數(shù)NGDAs已經取得了很高的成熟度,并且滿足了為數(shù)據(jù)集建設時設定的業(yè)務需求。此外,大部分NGDA數(shù)據(jù)集正在積極更新和維護,并且正在進行定期補充、審核和更新。
數(shù)據(jù)集的成熟度評估提供了從數(shù)據(jù)生產到即時在線服務全流程數(shù)據(jù)內容的透明度和健康狀況,并且通過評估可以明確需要生產哪些新的數(shù)據(jù)或者對哪些現(xiàn)有數(shù)據(jù)進行維護更新,從而進行有效的投資。
(4)目前的階段性成果
截至目前,F(xiàn)GDC完成聯(lián)邦地理空間數(shù)據(jù)組合資產管理計劃(2014-2016)的任務,共確定了17個專題類別和176個NGDA數(shù)據(jù)集構成了國家地理空間數(shù)據(jù)資產組合(2017年度有1個被刪除);FGDC NGDA數(shù)據(jù)集網(wǎng)頁提供完整列表(www.
fgdc.gov /ngda-reports/NGDA_Datasets.html),這些數(shù)據(jù)也共享在了GeoPlatform上。
2017年成立了一個跨機構團隊,重新對2015年177個納入NGDAs數(shù)據(jù)集成熟度評估結果進行分析。在GeoPlatform.gov共享平臺上,提供了NGDA400余個正在進行數(shù)據(jù)集成熟度評估可視化展示列表與相關統(tǒng)計結果。無論是數(shù)據(jù)管理方、數(shù)據(jù)審核方還是用戶,可以及時的掌握國家級地理空間數(shù)據(jù)集的相關進展。
地質大數(shù)據(jù)資產管理實施策略
四、地質大數(shù)據(jù)資產管理方案建議
1. 需求與目的
通過多年的數(shù)字化及數(shù)據(jù)庫建設,自然資源部中國地質調查局積累了海量的多門類地學數(shù)據(jù),包括水、土地、礦產、能源、森林、濕地、草地、海洋等資源,以及環(huán)境與基礎地質等十余類專題數(shù)據(jù)庫(數(shù)據(jù)集)。2017~2018年實施的地質云建設工程,將全局29個直屬單位的200余個地質數(shù)據(jù)庫(數(shù)據(jù)集)在地質云進行互聯(lián)互通與共享服務。2016~2018年十大工程300多個項目又積累了海量的調查數(shù)據(jù),數(shù)據(jù)涉及的專業(yè)多、類型復雜,除了支持地質調查業(yè)務流程運轉之外,越來越多地應用于提升管理決策效率、實現(xiàn)價值挖掘和科研技術創(chuàng)新。如果不能構建形成核心數(shù)據(jù)庫體系,對核心地質數(shù)據(jù)庫進行有效梳理及精細化管理,建立動態(tài)更新及實時共享機制,其價值就得不到很好體現(xiàn),嚴重影響數(shù)據(jù)價值發(fā)揮和高效服務。
大數(shù)據(jù)綜合應用對數(shù)據(jù)管理和應用提出了更高要求:
一是需要創(chuàng)建地質大數(shù)據(jù)核心數(shù)據(jù)庫體系。明確國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫的內容、更新維護責任、周期、技術流程,建立更新維護機制,保障數(shù)據(jù)更新維護工作的持續(xù)性、有效性、完整性和權威性。
二是需要創(chuàng)建統(tǒng)一的數(shù)據(jù)按生命周期進行管理的標準。數(shù)據(jù)采集、傳輸、存儲、應用、共享、維護更新與歸檔統(tǒng)一標準,將有效避免數(shù)據(jù)混亂沖突、一數(shù)多源、多樣多類等問題。統(tǒng)一標準是解決數(shù)據(jù)的關聯(lián)能力,保障信息交互、數(shù)據(jù)流通、系統(tǒng)訪問功能順暢的必要前提。
三是明確數(shù)據(jù)更新周期。明確不同級別數(shù)據(jù)庫中數(shù)據(jù)的采集、傳輸、存儲、應用、共享、維護更新與歸檔等全生命周期及流程。
四是建立統(tǒng)籌數(shù)據(jù)管理。建立分布式數(shù)據(jù)中心數(shù)據(jù)管理協(xié)調機制和統(tǒng)一的數(shù)據(jù)管理渠道,將分散在不同單位、不同業(yè)務部門的數(shù)據(jù)需求、數(shù)據(jù)質量、數(shù)據(jù)應用等問題的統(tǒng)籌管理和解決,支撐數(shù)據(jù)服務對科研與管理動態(tài)需求的即時響應。
五是建立規(guī)范的數(shù)據(jù)治理流程和數(shù)據(jù)質量監(jiān)控與評估措施,解決數(shù)據(jù)質量參差不齊、數(shù)據(jù)冗余、數(shù)據(jù)缺值、數(shù)據(jù)沖突等數(shù)據(jù)質量問題。
六是建立有效的數(shù)據(jù)安全管理機制,對內部數(shù)據(jù)、敏感信息、隱私信息、保密信息的訪問建立有效控制,使其脫敏脫密合規(guī)。
七是建立數(shù)據(jù)價值或成熟度評估體系。評估數(shù)據(jù)生產、傳輸、管理維護、更新等投入的成本,與數(shù)據(jù)應用產生的社會效益與經濟效益,及時剔除冗余數(shù)據(jù),支撐相關數(shù)據(jù)庫建設、管理與應用系統(tǒng)研發(fā)以及共享應用的相關投資決策。
2.地質大數(shù)據(jù)資產管理的定位與內容
(1)定位與實施策略
數(shù)據(jù)資產管理在大數(shù)據(jù)技術體系中,位于應用和底層平臺中間。數(shù)據(jù)資產管理包括兩個重要方面,一是數(shù)據(jù)資產管理的核心業(yè)務職能,二是確保這些業(yè)務職能落地實施的保障措施,包括組織架構、制度體系。數(shù)據(jù)資產管理在大數(shù)據(jù)應用體系中,處于承上啟下的重要地位。對上支持以價值挖掘為導向的數(shù)據(jù)應用開發(fā),對下依托大數(shù)據(jù)平臺實現(xiàn)數(shù)據(jù)全生命周期的管理。
實施地質大數(shù)據(jù)資產管理,主要包括4個階段:一是建立地質大數(shù)據(jù)資產管理的框架。二是開展數(shù)據(jù)審計,對數(shù)據(jù)資產進行識別和分級,形成地質大數(shù)據(jù)資產目錄,并對現(xiàn)有的數(shù)據(jù)管理與共享應用現(xiàn)狀進行評估,形成改進報告與投資建議;三是數(shù)據(jù)資產管理方案的實施,梳理優(yōu)選形成國家級地質大數(shù)據(jù)核心數(shù)據(jù)資產目錄,通過標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質量管理等措施對數(shù)據(jù)進行治理,提升數(shù)據(jù)綜合管理的整理能力。四是數(shù)據(jù)資產運營。數(shù)據(jù)資產管理是這四個階段不斷優(yōu)化的循環(huán)過程。
(2)建立地質大數(shù)據(jù)資產管理的框架
開展數(shù)據(jù)資產管理的頂層框架設計,明確數(shù)據(jù)資產管理的總體目標、業(yè)務框架、數(shù)據(jù)標準和數(shù)據(jù)視圖、數(shù)據(jù)清洗管理規(guī)范、績效評價體系、整體推進規(guī)劃以及相關的組織、人才保障機制等。
(3)數(shù)據(jù)審計
梳理不同單位創(chuàng)建和現(xiàn)在擁有的數(shù)據(jù),建立數(shù)據(jù)資產目錄;
梳理目前數(shù)據(jù)存儲、分享、管理和共享應用的方式和途徑;
評估當前數(shù)據(jù)管理政策以及數(shù)據(jù)生產、數(shù)據(jù)管理、共享應用中存在的不足,發(fā)現(xiàn)錯誤的數(shù)據(jù)使用、數(shù)據(jù)丟失情況和不可恢復的數(shù)據(jù);
定性/定量明確主要用戶及其他用戶對數(shù)據(jù)的需求,包括數(shù)據(jù)過去對用戶需求滿意程度的分析;
提出改進數(shù)據(jù)管理、共享應用的方法和維護管理的預算投資。
(4)數(shù)據(jù)資產管理實施
參考國內外相關數(shù)據(jù)資產管理的相關成果,提出地質大數(shù)據(jù)資產管理實施主要包含7項管理內容和2個保障措施。7項管理內容指的是國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫體系、數(shù)據(jù)標準管理(數(shù)據(jù)模型管理)、元數(shù)據(jù)管理、數(shù)據(jù)質量管理、數(shù)據(jù)安全管理、數(shù)據(jù)治理與數(shù)據(jù)價值評估;2個保障措施包括組織架構和制度體系。
——國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫體系
在全局地質大數(shù)據(jù)資產目錄的基礎上,建立地質大數(shù)據(jù)庫的評價指標和標準,按重要程度、價值高低進行分級處理,優(yōu)選形成國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫體系,并將國家級核心數(shù)據(jù)庫納入數(shù)據(jù)資產進行管理。
國家級核心數(shù)據(jù)庫是地質調查、國土空間規(guī)劃、地質環(huán)境評價、礦產能源資源保障等領域需求的基礎數(shù)據(jù),能夠被重復、共享應用于廣泛的科研工作、跨越各個單位與部門,并能夠在各個系統(tǒng)之間共享、高價值的基礎數(shù)據(jù),覆蓋范圍廣、數(shù)據(jù)信息全面、數(shù)據(jù)質量高、是專題領域的權威數(shù)據(jù)等特點。為滿足多級用戶變化的需求,國家級核心數(shù)據(jù)庫需要持續(xù)穩(wěn)定地更新,用以支撐相關的科學研究與政府決策。
——數(shù)據(jù)標準管理
梳理并管理現(xiàn)有不同專題數(shù)據(jù)的建庫標準(技術要求),包括數(shù)據(jù)的定義、數(shù)據(jù)模型、數(shù)據(jù)格式、比例尺、參考及引用的標準及公共代碼等?;跀?shù)據(jù)模型與當前的系統(tǒng)應用模型,建立全局地質數(shù)據(jù)通用的數(shù)據(jù)模型庫,將數(shù)據(jù)的生產與應用模型納入到統(tǒng)一的語義框架下,即明確數(shù)據(jù)的首要的創(chuàng)建點,且單點創(chuàng)建多方共享,就是避免原來同一個數(shù)據(jù)多方采集,多頭管理等導致的不一致的問題;同時也保證現(xiàn)有與未來應用系統(tǒng)模型的一致性與可維護性。
通過數(shù)據(jù)模型管理可以清楚地表達不同單位、不同專題各種應用之間的數(shù)據(jù)相關性,使不同部門的業(yè)務人員、應用開發(fā)人員和系統(tǒng)管理人員獲得關于地質大數(shù)據(jù)核心數(shù)據(jù)的統(tǒng)一完整視圖。
——元數(shù)據(jù)管理
元數(shù)據(jù)是描述數(shù)據(jù)的數(shù)據(jù)。元數(shù)據(jù)按用途不同分為核心數(shù)據(jù)庫元數(shù)據(jù)、業(yè)務元數(shù)據(jù)。
核心數(shù)據(jù)庫元數(shù)據(jù):描述核心數(shù)據(jù)庫采集、空間參考、格式、內容、管理與維護責任單位信息等,也包括數(shù)據(jù)生產、數(shù)據(jù)轉換的描述與質量信息等內容。
業(yè)務元數(shù)據(jù):描述數(shù)據(jù)不同應用系統(tǒng)中業(yè)務領域相關概念、關系和規(guī)則的數(shù)據(jù);包括業(yè)務術語、信息分類、指標、統(tǒng)計口徑等。
元數(shù)據(jù)管理的主要內容包括:建立地質大數(shù)據(jù)資產管理維護元數(shù)據(jù)標準;建設元數(shù)據(jù)管理工具;創(chuàng)建、采集、整合元數(shù)據(jù);管理元數(shù)據(jù)存儲庫;分發(fā)和使用元數(shù)據(jù)。
——數(shù)據(jù)質量管理
數(shù)據(jù)質量管理是指運用相關技術來衡量、提高和確保數(shù)據(jù)質量的規(guī)劃、實施與控制等一系列活動。內容主要包括:開發(fā)和提升數(shù)據(jù)質量意識;建立數(shù)據(jù)質量監(jiān)控方案及技術要求;清洗和糾正數(shù)據(jù)質量缺陷;設計并研發(fā)數(shù)據(jù)質量管理工具;監(jiān)控數(shù)據(jù)質量管理操作程序和績效;確定與評估數(shù)據(jù)質量水平等。
——數(shù)據(jù)安全管理
數(shù)據(jù)安全管理是指對數(shù)據(jù)設定安全等級,保證其被適當?shù)厥褂?。通過數(shù)據(jù)安全管理,規(guī)劃、開發(fā)和執(zhí)行安全政策與措施,提供適當?shù)纳矸菀源_認、授權、訪問與審計等功能。數(shù)據(jù)安全管理主要內容包括:明確數(shù)據(jù)安全需求及監(jiān)管要求;對涉密及業(yè)務敏感數(shù)據(jù)分級分類,定義數(shù)據(jù)安全強度,劃分信息等級;定義數(shù)據(jù)安全策略;定義數(shù)據(jù)安全標準,定義數(shù)據(jù)安全控制及措施;管理數(shù)據(jù)訪問視圖與權限;監(jiān)控用戶身份認證和訪問行為;部署數(shù)據(jù)安全防控系統(tǒng)或工具;審計數(shù)據(jù)安全等。
——數(shù)據(jù)治理
根據(jù)上述5個步驟提出的要求與規(guī)則,對現(xiàn)有的國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫進行清理與整合,建立地質大數(shù)據(jù)資源池,實現(xiàn)各個關聯(lián)系統(tǒng)與數(shù)據(jù)資源池的數(shù)據(jù)同步,使得不同部門可以跨系統(tǒng)地使用來自權威數(shù)據(jù)源的一致、高質量的核心專業(yè)數(shù)據(jù),降低成本和復雜度,從而支撐跨部門、跨系統(tǒng)數(shù)據(jù)融合應用。
——數(shù)據(jù)價值評估
數(shù)據(jù)價值管理是對數(shù)據(jù)內在價值的度量,可以從數(shù)據(jù)成本和數(shù)據(jù)應用價值兩方面來開展。數(shù)據(jù)成本一般包括采集獲取和存儲的費用(人工費用、IT設備等直接費用和間接費用等)和運維費用(業(yè)務操作費、技術操作費等)。數(shù)據(jù)應用價值主要考慮數(shù)據(jù)資產的分類、使用頻次、使用對象、使用效果和共享流通等因素。根據(jù)不同單位不同數(shù)據(jù)庫的集成度水平與應用場景,計算或估算數(shù)據(jù)在不同應用場景下的收益及單位數(shù)據(jù)資產的總體價值。
(5)保障措施
數(shù)據(jù)資產管理是體系化非常強的工作,需要充分考慮企業(yè)內部IT系統(tǒng)、數(shù)據(jù)資源以及業(yè)務應用的開展現(xiàn)狀,同時也要考慮圍繞業(yè)務開展所設立的人員和組織機構的情況,在此基礎上設計一套有針對性的數(shù)據(jù)資產管理組織架構、管理流程、管理機制和考核評估辦法,通過管理的手段明確“責權利”以保障數(shù)據(jù)資產管理工作有序開展。保障措施包括組織架構和制度體系。
典型的組織架構主要由數(shù)據(jù)資產管理委員會、數(shù)據(jù)資產管理中心和各業(yè)務部門構成,還需要明確組織架構中不同角色相應的職責,讓工作職責融入到日常的數(shù)據(jù)資產管理和使用工作中。
為保障活動實施和組織架構正常運轉,需要建立一套覆蓋數(shù)據(jù)引入、使用、開放等整個生產運營過程的數(shù)據(jù)管理規(guī)范,從制度上保障數(shù)據(jù)資產管理工作有據(jù)、可行、可控。
五、結論與建議
地質大數(shù)據(jù)資產是利用數(shù)據(jù)助力自然資源部中國地質調查局為國家生態(tài)文明建設服務的有效利器。地質大數(shù)據(jù)資產管理的水平某種程度上決定著自然資源的開發(fā)利用保護、資產估價和空間規(guī)劃的發(fā)展進程與水平。因此,建議以目前中國地質調查局正在開展的地質云建設為契機,提高數(shù)據(jù)資產的意識,開展數(shù)據(jù)資產管理的頂層框架設計,盡快編制并實施地質大數(shù)據(jù)的資產管理方案,構建國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫體系,建立全局地質數(shù)據(jù)通用的數(shù)據(jù)模型庫,創(chuàng)建統(tǒng)一的數(shù)據(jù)按生命周期進行管理的標準,對現(xiàn)有的國家級地質大數(shù)據(jù)核心數(shù)據(jù)庫進行治理,建立統(tǒng)一數(shù)據(jù)模型的地質大數(shù)據(jù)資源池,使得不同部門可以跨系統(tǒng)地使用來自權威數(shù)據(jù)源的一致、高質量的地質大數(shù)據(jù)核心專業(yè)數(shù)據(jù),從而支撐跨專業(yè)、跨部門、跨系統(tǒng)數(shù)據(jù)分析挖掘與融合應用,才能更好地為資源管理與環(huán)境評價提供堅實的數(shù)據(jù)支撐和服務。
責任編輯:陳鑫
如需了解更多信息,請登錄中國有色網(wǎng):www.qywhyj.com了解更多信息。
中國有色網(wǎng)聲明:本網(wǎng)所有內容的版權均屬于作者或頁面內聲明的版權人。
凡注明文章來源為“中國有色金屬報”或 “中國有色網(wǎng)”的文章,均為中國有色網(wǎng)原創(chuàng)或者是合作機構授權同意發(fā)布的文章。
如需轉載,轉載方必須與中國有色網(wǎng)( 郵件:cnmn@cnmn.com.cn 或 電話:010-63971479)聯(lián)系,簽署授權協(xié)議,取得轉載授權;
凡本網(wǎng)注明“來源:“XXX(非中國有色網(wǎng)或非中國有色金屬報)”的文章,均轉載自其它媒體,轉載目的在于傳遞更多信息,并不構成投資建議,僅供讀者參考。
若據(jù)本文章操作,所有后果讀者自負,中國有色網(wǎng)概不負任何責任。