地理國(guó)情大數(shù)據(jù)是典型的多源異構(gòu)數(shù)據(jù)，傳統(tǒng)的集成方法不利于信息共享和互操作，進(jìn)而嚴(yán)重制約了后續(xù)的計(jì)算與分析，基于地理本體的大數(shù)據(jù)集成和融合技術(shù)提供了有效降低甚至解決這種困難的途徑。

本體網(wǎng)絡(luò)描述語言(ontology web language，OWL)提供了數(shù)據(jù)與分析需求的形式化語義描述功能，充分利用本體具有的信息共享優(yōu)勢(shì)，可以驅(qū)動(dòng)相關(guān)信息的自動(dòng)組織，實(shí)現(xiàn)對(duì)終端用戶建模。如圖 4所示，采用地理本體的語義模型映射方法，建立點(diǎn)、線、面和復(fù)合要素與語義化地理國(guó)情要素的映射關(guān)系，通過形式化描述構(gòu)建面向統(tǒng)計(jì)分析的地理本體，進(jìn)而將不同數(shù)據(jù)進(jìn)行轉(zhuǎn)換和集成，實(shí)現(xiàn)原始存儲(chǔ)格式到類別、位置、時(shí)間等屬性的關(guān)聯(lián)。地理國(guó)情本體內(nèi)容涵蓋了數(shù)據(jù)對(duì)象、任務(wù)關(guān)系及其相關(guān)屬性，具體包括了幾何要素、統(tǒng)計(jì)分析指標(biāo)、模型方法、指數(shù)等內(nèi)容。通過地理本體數(shù)據(jù)模型的靈活設(shè)計(jì)，可有效簡(jiǎn)化統(tǒng)計(jì)分析大數(shù)據(jù)集成和融合過程，有助于提升面向政府部門應(yīng)用的統(tǒng)計(jì)分析輔助決策效率。

圖4 基于本體的地理國(guó)情大數(shù)據(jù)集成和融合

地理國(guó)情統(tǒng)計(jì)分析涉及大量的社會(huì)經(jīng)濟(jì)要素?cái)?shù)據(jù)。為實(shí)現(xiàn)地理國(guó)情數(shù)據(jù)與社會(huì)經(jīng)濟(jì)數(shù)據(jù)的整合和一體化空間分析，通過構(gòu)建社會(huì)經(jīng)濟(jì)數(shù)據(jù)和地理國(guó)情要素圖斑的相互關(guān)系，將表格化數(shù)據(jù)轉(zhuǎn)化成空間數(shù)據(jù)進(jìn)行統(tǒng)一管理。以人口數(shù)據(jù)空間化為例，可實(shí)現(xiàn)表達(dá)人口信息的空間單元由行政單元向規(guī)則格網(wǎng)單元轉(zhuǎn)換。人口分布與房屋建筑密切相關(guān)，通過建立人口與房屋建筑區(qū)屬性信息(類型、面積、層數(shù)、密度等)之間的空間匹配關(guān)系而實(shí)現(xiàn)人口精準(zhǔn)分配。

從空間數(shù)據(jù)的并行處理角度來看，地學(xué)算法并行化主要基于空間劃分與任務(wù)調(diào)度策略來完成。地理國(guó)情統(tǒng)計(jì)分析需要處理大體量的矢柵數(shù)據(jù)，劃分子任務(wù)均包含了耗時(shí)較長(zhǎng)的讀寫操作，從而限制了性能提升。

針對(duì)上述問題，利用規(guī)則網(wǎng)格將數(shù)據(jù)從空間范圍劃分為數(shù)以百計(jì)乃至更多的區(qū)塊，且采取一定的數(shù)據(jù)冗余策略，確保各區(qū)塊有效計(jì)算范圍內(nèi)輸入的完整性和獨(dú)立性。如圖 5所示，在數(shù)據(jù)劃分基礎(chǔ)上，設(shè)計(jì)了包含數(shù)據(jù)讀取(Reader)、寫入(Writer)和計(jì)算單元(compute unit，CU)3類模塊的異步并行調(diào)度機(jī)制。Reader負(fù)責(zé)連續(xù)從數(shù)據(jù)源讀取數(shù)據(jù)，并組織成連續(xù)區(qū)塊流，將其傳遞至CU。經(jīng)CU處理后由Writer輸出至內(nèi)存或文件。整個(gè)過程中，計(jì)算與數(shù)據(jù)訪問異步重疊，可顯著緩解讀寫造成的性能瓶頸中。

圖5 地理區(qū)塊數(shù)據(jù)異步并行調(diào)度

內(nèi)存計(jì)算是將數(shù)據(jù)存放在物理內(nèi)存中，以此作為數(shù)據(jù)處理加速的手段，多適用于數(shù)據(jù)訪問密集型算法。相比傳統(tǒng)方法，內(nèi)存計(jì)算可顯著提升數(shù)據(jù)頻繁訪問效率。

地理國(guó)情統(tǒng)計(jì)分析是典型的計(jì)算密集型操作，大部分分析算法的復(fù)雜度可達(dá)到O(n2)甚至O(n3)。在處理圖斑級(jí)數(shù)據(jù)時(shí)，可在內(nèi)存允許的情況下，將數(shù)據(jù)層一次性加載至內(nèi)存。對(duì)于柵格數(shù)據(jù)，可根據(jù)空間范圍分配同構(gòu)像元陣列存儲(chǔ)；對(duì)于矢量數(shù)據(jù)，可按矢量對(duì)象的結(jié)構(gòu)和長(zhǎng)度順序拷貝至內(nèi)存。圖 6所示為柵格和矢量圖層的內(nèi)存化表達(dá)。

圖6 空間數(shù)據(jù)圖層內(nèi)存化表達(dá)

陸表資源和地理過程都以地球表面為載體，但絕大多數(shù)應(yīng)用將地球簡(jiǎn)化成標(biāo)準(zhǔn)橢球體而忽略了實(shí)際地表起伏。橢球面積和實(shí)際表面面積在局部地區(qū)的相對(duì)差異甚至達(dá)到20%，給資源調(diào)查帶來較大的不確定性。

本文建立了基于不規(guī)則三角網(wǎng)的高精度表面面積模型，形成了具有不同地形特征適應(yīng)性的三維地表建模方法。同時(shí)，為應(yīng)對(duì)高強(qiáng)度計(jì)算作業(yè)需求，設(shè)計(jì)并實(shí)現(xiàn)了基于多線程的表面面積并行統(tǒng)計(jì)方法(見圖 7)，以支撐大范圍、高精度地表資源分類估算。

圖7 地表建模與多線程表面面積計(jì)算

轉(zhuǎn)移矩陣可全面分析區(qū)域土地利用變化的數(shù)量結(jié)構(gòu)特征與各用地類型變化的方向，因而廣泛應(yīng)用于土地利用變化和模擬中[24]。地理國(guó)情統(tǒng)計(jì)分析中，地表覆蓋轉(zhuǎn)移矩陣可定量刻畫研究期初的各地類流失去向和期末的各地類來源與構(gòu)成。

開展大范圍的兩期地表覆蓋數(shù)據(jù)轉(zhuǎn)移矩陣計(jì)算，必然要應(yīng)對(duì)高強(qiáng)度的計(jì)算負(fù)載與數(shù)據(jù)分區(qū)的不均衡性。在多核計(jì)算節(jié)點(diǎn)內(nèi)，采用并行的進(jìn)程池進(jìn)行任務(wù)管理，通過異步調(diào)度機(jī)制確?？臻e進(jìn)程及時(shí)獲取任務(wù)加載指令，實(shí)現(xiàn)了多個(gè)任務(wù)的異步并行。如圖 8所示，在進(jìn)程池支持下，首先對(duì)數(shù)據(jù)進(jìn)行匹配和數(shù)據(jù)裁切，確保兩期數(shù)據(jù)具有相同的空間范圍；然后以并行方式進(jìn)行數(shù)據(jù)疊加，形成多屬性復(fù)合層，進(jìn)而在多個(gè)進(jìn)程中完成面積計(jì)算；最后經(jīng)匯總形成相應(yīng)的轉(zhuǎn)移矩陣。

圖8 地表覆蓋轉(zhuǎn)移矩陣計(jì)算流程

為響應(yīng)大范圍地理國(guó)情數(shù)據(jù)的快速統(tǒng)計(jì)和在線計(jì)算請(qǐng)求，在對(duì)數(shù)據(jù)進(jìn)行格網(wǎng)化處理和預(yù)先計(jì)算的基礎(chǔ)上，可通過匯總得到不同格網(wǎng)單元的地類分類數(shù)量信息，形成矢量格網(wǎng)金字塔的基態(tài)數(shù)據(jù)層?；鶓B(tài)數(shù)據(jù)格網(wǎng)的寬度可根據(jù)統(tǒng)計(jì)精度需求進(jìn)行設(shè)定?；鶓B(tài)數(shù)據(jù)格網(wǎng)經(jīng)逐級(jí)匯總可得到上一級(jí)單元的分類統(tǒng)計(jì)信息，重復(fù)匯總至單一格網(wǎng)或與最小顯示范圍相適應(yīng)即可。在給定查詢范圍和層級(jí)精度要求后，完整格網(wǎng)可直接分類累加，邊緣破碎格網(wǎng)應(yīng)根據(jù)面積占比推算各地類數(shù)值。圖 9為格網(wǎng)金字塔構(gòu)建原理。

圖9 地理國(guó)情統(tǒng)計(jì)格網(wǎng)金字塔構(gòu)建

• 地理國(guó)情大數(shù)據(jù)統(tǒng)計(jì)服務(wù)模型

地理國(guó)情大數(shù)據(jù)統(tǒng)計(jì)分析過程是服務(wù)過程的工程計(jì)算表現(xiàn)，服務(wù)變化頻繁、控制復(fù)雜、多級(jí)運(yùn)行，難以采用傳統(tǒng)機(jī)理建模方法進(jìn)行維護(hù)。分布式服務(wù)組合系統(tǒng)(distributed service composition system，DSCS)可將某種功能(任務(wù))的執(zhí)行通過某種分配算法(均勻分配、負(fù)載均衡)分布到多個(gè)服務(wù)節(jié)點(diǎn)上，通過多個(gè)服務(wù)節(jié)點(diǎn)間的組合協(xié)作來完成某種功能(任務(wù))的系統(tǒng)。對(duì)于分布式服務(wù)組合系統(tǒng)，每一個(gè)節(jié)點(diǎn)都是一個(gè)計(jì)算單元，從服務(wù)的角色劃分分成兩類，即提供服務(wù)功能的服務(wù)節(jié)點(diǎn)與使用服務(wù)功能的終端節(jié)點(diǎn)。服務(wù)節(jié)點(diǎn)通過相互之間的組合、協(xié)作提供服務(wù)功能，終端節(jié)點(diǎn)以服務(wù)請(qǐng)求的方式向系統(tǒng)申請(qǐng)使用服務(wù)。

整個(gè)統(tǒng)計(jì)分析服務(wù)系統(tǒng)中，終端節(jié)點(diǎn)(用戶)申請(qǐng)服務(wù)的過程是一個(gè)泊松過程，可獨(dú)立、隨機(jī)發(fā)起對(duì)服務(wù)節(jié)點(diǎn)的接入申請(qǐng)。從申請(qǐng)到完成服務(wù)過程的模式流程如圖 10所示。具體流程如下。

圖10 地理國(guó)情大數(shù)據(jù)服務(wù)建模

應(yīng)用服務(wù)的具象化表達(dá)。統(tǒng)計(jì)分析服務(wù)系統(tǒng)對(duì)問題進(jìn)行分解，并檢索知識(shí)庫(kù)。若已存在流程，則進(jìn)入知識(shí)庫(kù)計(jì)算環(huán)節(jié)；否則，構(gòu)建問題解決流程。

根據(jù)解決流程申請(qǐng)使用服務(wù)功能。串聯(lián)各模型方法服務(wù)節(jié)點(diǎn)，各模型方法間不直接連邊，模型方法節(jié)點(diǎn)間的通信必須通過服務(wù)節(jié)點(diǎn)進(jìn)行。

模型方法地理尺度確定。地理尺度的變換并不遵循簡(jiǎn)單的線性關(guān)系，在滿足服務(wù)精度要求的情況下，合理確定模型方法地理尺度，如可通過劃分子單元、子單元計(jì)算、過程數(shù)據(jù)集中等步驟完成服務(wù)數(shù)據(jù)儲(chǔ)備。

服務(wù)熱點(diǎn)推理。通過確定模型方法服務(wù)節(jié)點(diǎn)和尺度及單元，圍繞熱點(diǎn)問題，經(jīng)過學(xué)習(xí)和推理，最終實(shí)現(xiàn)數(shù)據(jù)挖掘。如通過經(jīng)濟(jì)、人口的重心計(jì)算識(shí)別人口密度分異線(全國(guó)尺度上表現(xiàn)為胡煥庸線)，通過高程帶與地表覆蓋疊加提取地類空間分布規(guī)律，通過轉(zhuǎn)移矩陣發(fā)掘城市開發(fā)的增量特征和變化趨勢(shì)等。

返回終端節(jié)點(diǎn)服務(wù)。對(duì)于符合終端需求的服務(wù)進(jìn)行標(biāo)準(zhǔn)化，實(shí)現(xiàn)流程、尺度及單元的規(guī)范性約束，最后更新至知識(shí)庫(kù)。

• 地理國(guó)情大數(shù)據(jù)挖掘

地理國(guó)情大數(shù)據(jù)類型復(fù)雜，數(shù)據(jù)異構(gòu)，數(shù)據(jù)量大，服務(wù)需求多樣化。為了解決問題，往往進(jìn)行問題分解，形成單一類型的非組合子任務(wù)。各子任務(wù)可在常規(guī)的統(tǒng)計(jì)分析與數(shù)據(jù)挖掘方法基礎(chǔ)上，結(jié)合地理國(guó)情數(shù)據(jù)特征進(jìn)行決策優(yōu)化。

數(shù)據(jù)分類方法。從地理國(guó)情大數(shù)據(jù)中找出一組數(shù)據(jù)對(duì)象的共同特點(diǎn), 并按照分類模式將其劃分為不同的類，預(yù)測(cè)數(shù)據(jù)對(duì)象的離散類別。大數(shù)據(jù)分析中強(qiáng)調(diào)問題分類細(xì)分，采用數(shù)據(jù)挖掘中的分類技術(shù)，將問題分成不同的類別。分類方法有決策樹、K-最近鄰法(K-nearest neighbor, KNN)、支持向量機(jī)法(support vector machine，SVM)、向量空間模型法(vector space model，VSM)、Bayes法等。大數(shù)據(jù)中的數(shù)據(jù)分類是探索一種更優(yōu)的模式識(shí)別效果，如Bayes法就是一種獲得新信息既而更新預(yù)測(cè)的過程。大數(shù)據(jù)的分類就是通過量化和及時(shí)更新的數(shù)據(jù)不斷修正模型的過程。

回歸分析。用以描述和評(píng)估應(yīng)變量與一個(gè)或多個(gè)自變量之間的關(guān)系；反映的是數(shù)據(jù)屬性值在時(shí)間上的特征，產(chǎn)生一個(gè)將數(shù)據(jù)項(xiàng)映射到一個(gè)實(shí)值預(yù)測(cè)變量的函數(shù)，發(fā)現(xiàn)變量或?qū)傩蚤g的依賴關(guān)系。其主要研究問題包括數(shù)據(jù)序列的趨勢(shì)特征、數(shù)據(jù)序列的預(yù)測(cè)以及數(shù)據(jù)間的相關(guān)關(guān)系等。大數(shù)據(jù)中的回歸分析用于發(fā)現(xiàn)大數(shù)據(jù)中不同變量間的因果關(guān)系，屬于有監(jiān)督學(xué)習(xí)的范疇。如通過回歸分析探索房屋建筑、人口、興趣點(diǎn)(point of interest，POI)分布等城市要素與城市空間形態(tài)的關(guān)系。

聚類分析。聚類算法類似于分類，但與分類目的不同，是把n個(gè)對(duì)象劃分成k個(gè)非空、不相交的聚類，屬于同一類別的數(shù)據(jù)間的相似性很大，但不同類別之間數(shù)據(jù)的相似性很小，跨類的數(shù)據(jù)關(guān)聯(lián)性較低。如在大數(shù)據(jù)中基于擁堵時(shí)間或空間距離的城市交通路況聚類。

關(guān)聯(lián)規(guī)則。關(guān)聯(lián)規(guī)則是隱藏在數(shù)據(jù)項(xiàng)之間的關(guān)聯(lián)或相互關(guān)系，即可以根據(jù)一個(gè)數(shù)據(jù)項(xiàng)的出現(xiàn)推導(dǎo)出其他數(shù)據(jù)項(xiàng)的出現(xiàn)。關(guān)聯(lián)規(guī)則的挖掘過程主要包括兩個(gè)階段：高頻項(xiàng)目單元查找和關(guān)聯(lián)規(guī)則建立。如在大數(shù)據(jù)中基于以往地表覆蓋數(shù)據(jù)、人口結(jié)構(gòu)、經(jīng)濟(jì)產(chǎn)業(yè)等數(shù)據(jù)預(yù)測(cè)城市擴(kuò)張方向及形態(tài)。

神經(jīng)網(wǎng)絡(luò)方法。神經(jīng)網(wǎng)絡(luò)作為一種人工智能技術(shù)，可以有效處理非線性、模糊、不完整、不嚴(yán)密的知識(shí)或數(shù)據(jù)為特征的問題。經(jīng)典的神經(jīng)網(wǎng)絡(luò)模型主要分為3大類：用于分類預(yù)測(cè)和模式識(shí)別的前饋式神經(jīng)網(wǎng)絡(luò)模型，如函數(shù)型網(wǎng)絡(luò)、感知機(jī)等；用于聯(lián)想記憶和優(yōu)化算法的反饋式神經(jīng)網(wǎng)絡(luò)模型，如Hopfield離散模型等；用于聚類的自組織映射方法，如自適應(yīng)共振理論(adaptive resonance theory，ART)模型等。

• 服務(wù)自然資源保護(hù)與監(jiān)控

保護(hù)“永久基本農(nóng)田”是基本國(guó)策?；谟谰没巨r(nóng)田數(shù)據(jù)，結(jié)合地理國(guó)情地表覆蓋數(shù)據(jù)，通過大數(shù)據(jù)統(tǒng)計(jì)分析，可以及時(shí)發(fā)現(xiàn)公路兩側(cè)一定距離緩沖區(qū)永久基本農(nóng)田范圍內(nèi)人為違建設(shè)施，并對(duì)違建設(shè)施的空間位置和長(zhǎng)度、面積進(jìn)行準(zhǔn)確標(biāo)定(見圖 11)。此外，為加強(qiáng)國(guó)家級(jí)自然保護(hù)區(qū)、國(guó)家公園自然生態(tài)系統(tǒng)原真性和完整性保護(hù)，通過對(duì)不同類別地表覆蓋數(shù)據(jù)分析，可以發(fā)現(xiàn)區(qū)域中存在的房屋、道路、構(gòu)筑物、人工堆掘地等用于居住、交通和經(jīng)濟(jì)功能的違建現(xiàn)象(見圖 12)，提升自然資源保護(hù)的力度。

圖11 對(duì)永久基本農(nóng)田的非法占用

圖12 自然保護(hù)區(qū)監(jiān)測(cè)違建

• 服務(wù)生態(tài)環(huán)境保護(hù)與監(jiān)測(cè)

針對(duì)生態(tài)區(qū)域內(nèi)生態(tài)要素空間分布及不同時(shí)期生態(tài)要素變化情況開展監(jiān)測(cè)，建立地理國(guó)情分類體系與生態(tài)地表分類體系之間的對(duì)應(yīng)關(guān)系，通過地理國(guó)情大數(shù)據(jù)統(tǒng)計(jì)分析，可以有效促進(jìn)和提升生態(tài)環(huán)境保護(hù)與監(jiān)測(cè)活動(dòng)的實(shí)效。例如，圍繞新疆庫(kù)魯斯臺(tái)草原草地分布格局，利用2008－2015年植被覆蓋變化數(shù)據(jù)進(jìn)行統(tǒng)計(jì)，依據(jù)宜林則林、宜草則草的原則，運(yùn)用地理國(guó)情大數(shù)據(jù)統(tǒng)計(jì)分析方法計(jì)算草原植被空間覆蓋指數(shù)，反映草原植被覆蓋退化狀況(見圖 13)。在此基礎(chǔ)上，結(jié)合生態(tài)補(bǔ)償標(biāo)準(zhǔn)，通過清退草地面積核定補(bǔ)償資金，探索和驗(yàn)證草原生態(tài)補(bǔ)償和政府轉(zhuǎn)移支付機(jī)制，可以有效促進(jìn)草原的生態(tài)環(huán)境保護(hù)。此外，通過大數(shù)據(jù)統(tǒng)計(jì)分析，還可以有效監(jiān)測(cè)區(qū)域生態(tài)環(huán)境的變化情況，特別是生態(tài)改善的區(qū)域。

圖13 草原退耕還林還草

• 服務(wù)土地資源質(zhì)量評(píng)價(jià)

基于土地各構(gòu)成因素及綜合體特征認(rèn)識(shí)，根據(jù)建設(shè)用地地形、土壤、植被、水等要素適宜性要求，以及土地利用相關(guān)社會(huì)經(jīng)濟(jì)條件、適宜性、土地潛力和土地經(jīng)濟(jì)等評(píng)價(jià)分析方法，以土地合理利用為目標(biāo)，根據(jù)土地用途對(duì)土地的屬性進(jìn)行質(zhì)量鑒定和數(shù)量統(tǒng)計(jì)，從地理國(guó)情角度分析土地的適宜性程度、生產(chǎn)潛力、經(jīng)濟(jì)效益和對(duì)環(huán)境有利或不利的后果，確定土地價(jià)值，為土地利用規(guī)劃、土地資源管理等應(yīng)用領(lǐng)域服務(wù)。例如，通過北京市人口與地表資源承載分析(見圖 14)，得出各環(huán)內(nèi)均以生活空間為主，其次為生態(tài)空間和生產(chǎn)空間。五至六環(huán)北部生態(tài)空間分布密集，而南部生產(chǎn)空間和生態(tài)生產(chǎn)空間分布集中，為全市國(guó)土空間開發(fā)格局優(yōu)化及資源環(huán)境可持續(xù)發(fā)展提供決策依據(jù)。

圖14 土地資源評(píng)價(jià)

• 服務(wù)國(guó)家重大戰(zhàn)略和區(qū)域規(guī)劃實(shí)施

對(duì)國(guó)家級(jí)新區(qū)的建成區(qū)、地表覆蓋、建設(shè)用地、重要基礎(chǔ)設(shè)施建設(shè)、重要生態(tài)用地、重要社會(huì)經(jīng)濟(jì)區(qū)域單元在面積、分布、數(shù)量、占比等方面的現(xiàn)狀及變化進(jìn)行監(jiān)測(cè)，開展國(guó)家級(jí)新區(qū)建設(shè)進(jìn)程和效果分析評(píng)價(jià)，掌握國(guó)家級(jí)新區(qū)的規(guī)劃建設(shè)和發(fā)展?fàn)顩r，促進(jìn)測(cè)繪服務(wù)轉(zhuǎn)型，提升服務(wù)政府決策、服務(wù)社會(huì)經(jīng)濟(jì)發(fā)展的能力。例如，通過對(duì)蘭州新區(qū)地理國(guó)情現(xiàn)狀、變化情況以及建設(shè)進(jìn)程開展評(píng)價(jià)，發(fā)現(xiàn)監(jiān)測(cè)現(xiàn)狀和規(guī)劃存在部分不符之處(見圖 15)，該成果為國(guó)家級(jí)新區(qū)監(jiān)測(cè)的全面深入開展起到示范和推動(dòng)作用。

圖 15 蘭州新區(qū)2010—2013年地表覆蓋變化分析

本文介紹了地理國(guó)情大數(shù)據(jù)統(tǒng)計(jì)分析的技術(shù)框架及關(guān)鍵技術(shù)，探討了解決地理國(guó)情大數(shù)據(jù)集成管理、高效統(tǒng)計(jì)計(jì)算、深度挖掘分析與多樣化服務(wù)的核心技術(shù)體系，可為全國(guó)與地方開展地理國(guó)情大數(shù)據(jù)的統(tǒng)計(jì)分析和服務(wù)工作提供關(guān)鍵技術(shù)支撐。

隨著自然資源部改革的進(jìn)一步深入，基于地理國(guó)情大數(shù)據(jù)的統(tǒng)計(jì)分析與服務(wù)已成為推動(dòng)測(cè)繪地理信息行業(yè)思想變革、技術(shù)創(chuàng)新和人才培養(yǎng)的重要力量，這將為履行自然資源監(jiān)管、生態(tài)保護(hù)修復(fù)等職責(zé)提供重要的信息和技術(shù)支持。