新時期,人類面向空間環(huán)境和活動特征的探索日益推進。而如需深入探索環(huán)境和活動特征,則需要地理時空大數(shù)據(jù)的介入。時空大數(shù)據(jù)同時兼具時間和空間維度,具有多源、海量、自動采集、更新快速的綜合特點。
《地圖時空大數(shù)據(jù)爬取與規(guī)劃分析教程》是介紹一類特殊的大數(shù)據(jù)資源,即地圖時空大數(shù)據(jù),從數(shù)據(jù)爬取到分析技術(shù)的全套教程。書中首次全面提出了興趣點、興趣線和興趣面的數(shù)據(jù)類型及爬取方法,同時展示了批量獲取的動態(tài)出行數(shù)據(jù)或可達性數(shù)據(jù)在城市與交通研究中的應(yīng)用。
《地圖時空大數(shù)據(jù)爬取與規(guī)劃分析教程》可作為空間規(guī)劃、城市與交通規(guī)劃、城市地理研究等領(lǐng)域的專業(yè)教材,以及計算機、地理信息系統(tǒng)等專業(yè)的參考書。
隨著社會經(jīng)濟和科學(xué)技術(shù)的快速發(fā)展,人類對自身生活環(huán)境的認知已不僅僅局限于書本、文字、記憶、印象等。這種面向空間環(huán)境和活動特征的探索正以更加深入的方式推進,并反過來影響著人們的生活和習(xí)慣。同時,如何表述人類活動的客觀世界和活動特征,已經(jīng)成為研究的熱點和重點。伴隨著計算機技術(shù)的發(fā)展和互聯(lián)網(wǎng)應(yīng)用的普及,如何運用一手的數(shù)據(jù)開展分析并表征客觀世界和人類活動,無疑也為學(xué)者提供了廣闊的研究空間。這其中,數(shù)據(jù)起著非常關(guān)鍵的作用。而如需深入探索環(huán)境和活動特征,則需要地理時空大數(shù)據(jù)的介入。事實上,人們一直掌握著大量的地理空間和時間信息,但這些信息往往是破碎的、零散的、短暫的和不系統(tǒng)的,迫切需要格式化、系統(tǒng)性、多維多源的大數(shù)據(jù)作為支撐。
時空大數(shù)據(jù)同時兼具時間和空間維度,具有多源、海量、自動采集、更新快速的綜合特點,能夠?qū)崟r地抽取階段行為特征,感知、理解和預(yù)測導(dǎo)致某特定階段行為發(fā)生的態(tài)勢。與人的活動息息相關(guān)的各類時空大數(shù)據(jù),如微博簽到數(shù)據(jù)、出租車軌跡數(shù)據(jù)、手機信令數(shù)據(jù)、公交IC卡數(shù)據(jù)、道路卡口交通量數(shù)據(jù)等,無疑為我們提供了豐富、可以實時獲取、感知并用于事件判斷、分析的巨大信息。而在這些多源的時空大數(shù)據(jù)中,地圖時空大數(shù)據(jù)是常常被忽視的一類。盡管我們在出行前會登錄地圖軟件查詢公交出行時耗、用餐前會登錄地圖軟件查詢周邊餐館信息,但其實這些簡單的操作背后是地圖供應(yīng)商用巨資打造的基于地理空間信息的數(shù)據(jù)庫,具備精準(zhǔn)的全時空軌跡數(shù)據(jù)。因此,現(xiàn)成的時空大數(shù)據(jù)就在那里,卻被“冷落”了。
地圖時空大數(shù)據(jù)中隱藏有各類POI(興趣點)信息,如餐館、公交站、企業(yè)、停車場等,同時還包含LOI(興趣線)信息和AOI(興趣面)信息,前者如道路網(wǎng)、公交線網(wǎng),后者如行政區(qū)劃、公園綠地等。此外,地圖時空大數(shù)據(jù)還包括柵格數(shù)據(jù)(如街景圖)和動態(tài)交通出行數(shù)據(jù)(如分方式出行時耗、距離),這些數(shù)據(jù)量可能是數(shù)以千萬計的。這些都是城市規(guī)劃、交通規(guī)劃等涉及空間規(guī)劃分析的重要數(shù)據(jù)來源。如城市規(guī)劃中的城市空間結(jié)構(gòu)、居住就業(yè)分布、商業(yè)中心識別,交通規(guī)劃中的交通線網(wǎng)(含道路和公交)平臺建設(shè)、可達性分析,甚至交通模型中的參數(shù)標(biāo)定。如果我們還停留在人工調(diào)查階段,則會浪費高德、騰訊、百度這些科技企業(yè)為后人栽下的“乘涼樹”。因此,何嘗不站在巨人的肩膀上開展工作呢?正所謂“站得更高看得更遠”。
“大數(shù)據(jù)時代”的到來,正在深刻改變著人們的工作、生活和思維方式。大數(shù)據(jù)分析與應(yīng)用為規(guī)劃設(shè)計、學(xué)術(shù)科研提供了新方法和新手段,為理性化規(guī)劃帶來新的契機,并且不斷推動著城鄉(xiāng)治理朝高效化、科學(xué)化和現(xiàn)代化方向發(fā)展。不僅如此,大數(shù)據(jù)輔助決策將成為規(guī)劃行業(yè)改革、供給側(cè)改革的外在動力。地圖軟件為規(guī)劃、設(shè)計、研究提供了潛在而豐富的各類數(shù)據(jù)信息,這是不容忽視的。
基礎(chǔ)篇
第1章 概述
1.1 數(shù)據(jù)源的變革
1.1.1 數(shù)據(jù)源的多樣性
1.1.2 數(shù)據(jù)源的全樣性
1.1.3 數(shù)據(jù)源的連續(xù)性
1.2 地圖時空大數(shù)據(jù)
1.2.1 獲取途徑
1.2.2 數(shù)據(jù)類別
1.2.3 數(shù)據(jù)格式
1.3 章節(jié)安排
第2章 Python編程語言簡介
2.1 Python編程語言特性
2.1.1 總體特性
2.1.2 編輯與運行環(huán)境
2.1.3 廣泛應(yīng)用
2.2 Python開發(fā)平臺搭建
2.3 Python基礎(chǔ)
2.3.1 數(shù)據(jù)類型與結(jié)構(gòu)
2.3.2 控制結(jié)構(gòu)
2.3.3 函數(shù)
2.3.4 模塊與包
2.3.5 面向?qū)ο?br>2.3.6 文本文件讀寫
2.4 Python與ArcPy
2.4.1 ArcPy簡介
2.4.2 ArcPy類與函數(shù)
2.4.3 ArcPy主要功能
第3章 ArcGIS軟件與操作簡介
3.1 ArcGIS軟件簡介
3.2 ArcMap基礎(chǔ)操作
3.2.1 創(chuàng)建地圖文檔并加載數(shù)據(jù)
3.2.2 圖形數(shù)據(jù)編輯
3.2.3 屬性數(shù)據(jù)增刪、計算與統(tǒng)計
3.2.4 專題圖制作與輸出
3.3 ArcMap常用的空間分析功能
3.3.1 緩沖區(qū)分析
3.3.2 疊置分析
3.3.3 網(wǎng)絡(luò)分析
矢量數(shù)據(jù)采集與分析篇
第4章 興趣點數(shù)據(jù)采集與分析
4.1 興趣點(POI)概念與類別
4.2 “搜索API”解析
4.2.1 密鑰申請
4.2.2 “搜索API”請求URL
4.2.3 “搜索API”返回數(shù)據(jù)
4.3 POI數(shù)據(jù)的批量采集
4.3.1 POI的類別與編碼確定
4.3.2 程序編寫
4.3.3 程序運行
4.3.4 數(shù)據(jù)結(jié)果
4.4 企業(yè)類型數(shù)據(jù)采集與分析
4.4.1 POI類別與編碼確定
4.4.2 數(shù)據(jù)采集與存儲
4.4.3 南京市主城區(qū)產(chǎn)業(yè)類型識別
4.5 公交站點數(shù)據(jù)采集與分析
4.5.1 POI類別與編碼確定
4.5.2 數(shù)據(jù)采集與存儲
4.5.5 昆山市公交服務(wù)范圍覆蓋率分析
4.6 快速路出入口數(shù)據(jù)采集與分析
4.6.1 POI類別與編碼確定
4.6.2 數(shù)據(jù)采集與存儲
4.6.3 南京市快速內(nèi)環(huán)出入口設(shè)置合理性分析
第5章 興趣線數(shù)據(jù)采集與分析
5.1 興趣線(LOI)概念與類別
5.2 “交通態(tài)勢API”解析
5.2.1 密鑰申請
5.2.2 “交通態(tài)勢API”請求URL
5.2.3 “交通態(tài)勢API”返回數(shù)據(jù)
5.3 道路數(shù)據(jù)采集與分析
5.3.1 研究區(qū)域網(wǎng)格數(shù)據(jù)準(zhǔn)備
5.3.2 程序編寫
5.3.3 程序運行
5.3.4 南京市主城區(qū)晚高峰交通擁堵情況
5.4 公交線路數(shù)據(jù)的采集
5.4.1 公交線路查詢
5.4.2 公交線路數(shù)據(jù)的批量采集
5.4.3 基于“坐標(biāo)轉(zhuǎn)換API”轉(zhuǎn)換坐標(biāo)
5.4.4 數(shù)據(jù)叉件生成
5.4.5 數(shù)據(jù)結(jié)果
5.5 南京市公交面積覆蓋率分析
第6章 興趣面數(shù)據(jù)采集與分析
6.1 興趣面(AOI)概念與類別
6.2 行政區(qū)劃面數(shù)據(jù)的采集
6.2.1 密鑰申請
6.2.2 “行政區(qū)域查詢API”分析
6.2.3 行政區(qū)域面數(shù)據(jù)的采集
6.2.4 數(shù)據(jù)結(jié)果
6.3 公園綠地數(shù)據(jù)采集與分析
6.3.1 地圖響應(yīng)頁面分析
6.3.2 公園綠地面數(shù)據(jù)的批量采集
6.3.3 數(shù)據(jù)結(jié)果
6.4 南京市主城區(qū)公園綠地社會服務(wù)功能分析
6.4.1 研究數(shù)據(jù)與方法
6.4.2 公園綠地服務(wù)范圍覆蓋率分析
6.4.3 公園綠地服務(wù)重疊度分析
6.4.4 單位面積公園綠地服務(wù)人口數(shù)分析
……
柵格數(shù)據(jù)采集與分析篇
交通出行數(shù)據(jù)采集與分析篇
附錄
參考文獻