關(guān)于我們
書單推薦
新書推薦
|
大數(shù)據(jù)實踐之路:數(shù)據(jù)中臺+數(shù)據(jù)分析+產(chǎn)品應(yīng)用 讀者對象:本書主要面向數(shù)據(jù)產(chǎn)品經(jīng)理,數(shù)據(jù)分析師、數(shù)據(jù)運營人員等數(shù)據(jù)行業(yè)從業(yè)者也可以在本書中找到一些思路和方法,如了解數(shù)據(jù)的應(yīng)用、掌握分析方法等。本書也可以為想轉(zhuǎn)行做數(shù)據(jù)產(chǎn)品經(jīng)理的讀者提供幫助。
本書共13 章,匯集了7 位作者(來自各大互聯(lián)網(wǎng)企業(yè))的知識總結(jié)和經(jīng)驗分享。本書借助老湯姆、小風、阿北、小諾在某電商企業(yè)數(shù)據(jù)部門工作的故事,通過大量案例深入淺出地介紹了數(shù)據(jù)中臺建設(shè)與應(yīng)用之路。本書以Why-What-How 的思路展開,從0 到1 介紹知識點,并重點講述How 的過程,同時結(jié)合某個場景下的具體案例,以使讀者更好地理解實操過程。每個企業(yè)都會面臨各種各樣的數(shù)據(jù)問題,有數(shù)據(jù)質(zhì)量的問題、數(shù)據(jù)獲取效率的問題、數(shù)據(jù)應(yīng)用價值的問題等。本書首先介紹數(shù)據(jù)中臺的建設(shè),確保數(shù)據(jù)的質(zhì)量,為企業(yè)的數(shù)據(jù)質(zhì)量體系建設(shè)提供堅實的基礎(chǔ);然后,進行偏向深入業(yè)務(wù)的分析探索,介紹如何從數(shù)據(jù)分析角度更好地賦能業(yè)務(wù)發(fā)展;最后,介紹數(shù)據(jù)應(yīng)用,解決數(shù)據(jù)獲取效率的問題,并把一些分析思路和業(yè)務(wù)策略沉淀為數(shù)據(jù)產(chǎn)品,從而更好地將數(shù)據(jù)應(yīng)用于業(yè)務(wù)。本書結(jié)合各大互聯(lián)網(wǎng)企業(yè)的實際項目案例,讓讀者真正掌握數(shù)據(jù)產(chǎn)品經(jīng)理這個新興職業(yè)的必備技能和核心能力。
林澤豐,筆名小風,某國有企業(yè)的數(shù)據(jù)中臺產(chǎn)品負責人。UBDC全域大數(shù)據(jù)峰會“燈塔人物”,“友盟杯”數(shù)據(jù)大賽三等獎獲得者,公眾號“一個數(shù)據(jù)人的自留地”的課程講師。在電商、社交、交通、直播等領(lǐng)域擔任過產(chǎn)品、運營、數(shù)據(jù)等部門的負責人,有7年多的互聯(lián)網(wǎng)從業(yè)經(jīng)驗?珙I(lǐng)域、跨部門實戰(zhàn)經(jīng)驗豐富,曾從0到1搭建過企業(yè)數(shù)據(jù)中臺、大數(shù)據(jù)平臺、智能營銷平臺,擅長埋點模型設(shè)計、指標質(zhì)量治理、數(shù)倉架構(gòu)、數(shù)據(jù)運營等。許秋貴,筆名阿北,貝殼找房的高級數(shù)據(jù)分析師,畢業(yè)于東北農(nóng)業(yè)大學。在校期間主導(dǎo)開發(fā)了校園拼車等應(yīng)用,幫助大學生拼車省錢出行。曾就職于百度、滴滴等互聯(lián)網(wǎng)“大廠”,有多年數(shù)據(jù)分析經(jīng)驗。陳斌,筆名小諾,某互聯(lián)網(wǎng)“大廠”的策略產(chǎn)品經(jīng)理,畢業(yè)于大連東軟信息學院。人人都是產(chǎn)品經(jīng)理網(wǎng)站的“20年度熱文作者”,公眾號“一個數(shù)據(jù)人的自留地”的聯(lián)合創(chuàng)辦人。先后就職于百度、小米,在搜索引擎、資訊、電商等領(lǐng)域從事過搜索、推薦、BI、畫像、反作弊、消息觸達等產(chǎn)品工作,涉獵范圍較廣,經(jīng)驗豐富。陳麗媛,筆名草帽小子,自如畫像數(shù)據(jù)產(chǎn)品經(jīng)理,擁有兩項發(fā)明專利。人人都是產(chǎn)品經(jīng)理網(wǎng)站的專欄作家,公眾號“一個數(shù)據(jù)人的自留地”聯(lián)合創(chuàng)辦人。在用戶畫像、數(shù)據(jù)埋點、指標體系、BI等方面具有豐富的實戰(zhàn)經(jīng)驗,所著系列文章深受廣大讀者喜愛。
第1 章 那些困擾我們的數(shù)據(jù)問題 ??????????????????????????????????????????????????????????1
1.1 數(shù)據(jù)質(zhì)量的問題 ....................................................................................... 1 1.2 數(shù)據(jù)獲取效率的問題 ............................................................................... 5 1.3 數(shù)據(jù)應(yīng)用價值的問題 ............................................................................... 8 數(shù)據(jù)中臺篇 第2 章 元數(shù)據(jù)中心 ?????????????????????????????????????????????????????????????????????????? 15 2.1 元數(shù)據(jù)中心概述 ..................................................................................... 16 2.2 元數(shù)據(jù)中心的核心功能 ......................................................................... 17 2.2.1 數(shù)據(jù)整合 ..................................................................................... 17 2.2.2 數(shù)據(jù)管理 ..................................................................................... 19 2.2.3 數(shù)據(jù)地圖 ..................................................................................... 25 第3 章 數(shù)據(jù)指標中心 ??????????????????????????????????????????????????????????????????????? 29 3.1 數(shù)據(jù)指標中心概述 ................................................................................. 30 3.2 數(shù)據(jù)指標中心的設(shè)計思路 ..................................................................... 30 3.2.1 定義指標并將其歸集到對應(yīng)的主題域 ....................................... 30 3.2.2 拆分原子指標與派生指標 .......................................................... 31 3.2.3 定義原子指標與派生指標的生產(chǎn)邏輯 ....................................... 32 3.2.4 通過指標管理平臺對指標進行規(guī)范生產(chǎn) ................................... 33 第4 章 數(shù)倉模型中心 ??????????????????????????????????????????????????????????????????????? 37 4.1 數(shù)倉模型中心概述 ................................................................................. 38 4.2 數(shù)倉模型中心的設(shè)計思路 ..................................................................... 39 4.2.1 控制數(shù)據(jù)源 ................................................................................. 39 4.2.2 劃分主題域 ................................................................................. 39 4.2.3 構(gòu)建一致性維度 ......................................................................... 41 4.2.4 構(gòu)建總線矩陣 ............................................................................. 42 4.2.5 數(shù)倉分層建設(shè) ............................................................................. 42 4.2.6 數(shù)倉效果評估 ............................................................................. 43 第5 章 數(shù)據(jù)資產(chǎn)中心 ??????????????????????????????????????????????????????????????????????? 47 5.1 數(shù)據(jù)資產(chǎn)中心概述 ................................................................................. 48 5.2 數(shù)據(jù)資產(chǎn)中心的治理流程 ..................................................................... 49 5.2.1 數(shù)據(jù)資產(chǎn)定級 ............................................................................. 49 5.2.2 數(shù)據(jù)資產(chǎn)質(zhì)量治理 ..................................................................... 52 5.2.3 數(shù)據(jù)資產(chǎn)成本治理 ..................................................................... 56 第6 章 數(shù)據(jù)服務(wù)中心 ??????????????????????????????????????????????????????????????????????? 61 6.1 數(shù)據(jù)服務(wù)中心概述 ................................................................................. 62 6.2 數(shù)據(jù)服務(wù)中心的設(shè)計思路 ..................................................................... 62 6.2.1 將數(shù)據(jù)寫入查詢庫 ..................................................................... 62 6.2.2 搭建元數(shù)據(jù)模型 ......................................................................... 63 6.2.3 按主題歸類 ................................................................................. 65 6.2.4 緩存優(yōu)化 ..................................................................................... 65 6.2.5 數(shù)據(jù)接口化 ................................................................................. 67 6.2.6 構(gòu)建API 集市 ............................................................................. 68 6.2.7 統(tǒng)一數(shù)據(jù)服務(wù) ............................................................................. 68 數(shù)據(jù)分析篇 第7 章 數(shù)據(jù)分析理論 ??????????????????????????????????????????????????????????????????????? 73 7.1 業(yè)務(wù)和數(shù)據(jù) ............................................................................................ 73 7.1.1 業(yè)務(wù)和數(shù)據(jù)的閉環(huán) ..................................................................... 74 7.1.2 不同崗位的職責邊界與合作 ...................................................... 75 7.1.3 數(shù)據(jù)、信息和知識 ..................................................................... 75 7.1.4 業(yè)務(wù)策略的閉環(huán) ......................................................................... 77 7.1.5 人人都會數(shù)據(jù)分析的趨勢 .......................................................... 78 7.2 數(shù)據(jù)分析師的全貌 ................................................................................. 79 7.2.1 數(shù)據(jù)分析的定義與流程 .............................................................. 79 7.2.2 數(shù)據(jù)分析的3 種場景 .................................................................. 82 7.2.3 數(shù)據(jù)分析師的核心能力 .............................................................. 84 7.2.4 數(shù)據(jù)分析師的職業(yè)素養(yǎng) .............................................................. 85 7.2.5 數(shù)據(jù)分析師的工作內(nèi)容 .............................................................. 86 7.2.6 數(shù)據(jù)分析師的考核 ..................................................................... 86 7.3 數(shù)據(jù)分析團隊的組織架構(gòu)及其對應(yīng)的工作模式 ................................... 88 7.3.1 數(shù)據(jù)分析團隊的組織架構(gòu) .......................................................... 88 7.3.2 不同組織架構(gòu)的工作模式 .......................................................... 89 7.4 數(shù)據(jù)分析師的工作方式 ......................................................................... 90 7.4.1 工作象限圖 ................................................................................. 91 7.4.2 1+N 的工作內(nèi)容 ......................................................................... 91 7.4.3 與業(yè)務(wù)方的合作模式 .................................................................. 92 7.4.4 有關(guān)工作方式常見問題的解法思考 ........................................... 94 第8 章 數(shù)據(jù)分析實操 ??????????????????????????????????????????????????????????????????????? 97 8.1 預(yù)測性分析 ............................................................................................ 97 8.1.1 預(yù)測性分析的目的 ..................................................................... 98 8.1.2 分析思路與方法 ......................................................................... 99 8.1.3 預(yù)測性分析案例 ......................................................................... 99 8.2 描述性分析 .......................................................................................... 101 8.2.1 描述性分析的目的 ................................................................... 101 8.2.2 分析思路與方法 ....................................................................... 102 8.2.3 描述性分析案例 ....................................................................... 103 8.3 診斷性分析 .......................................................................................... 104 8.3.1 診斷性分析的目的 ................................................................... 105 8.3.2 分析思路與方法 ....................................................................... 105 8.4 數(shù)據(jù)分析報告 ...................................................................................... 110 8.4.1 數(shù)據(jù)分析報告的定位 ................................................................ 110 8.4.2 預(yù)測性分析報告的結(jié)構(gòu) ............................................................ 111 8.4.3 描述性分析報告的結(jié)構(gòu) ............................................................ 111 8.4.4 診斷性分析報告的結(jié)構(gòu) ............................................................ 112 數(shù)據(jù)應(yīng)用篇 第9 章 BI 系統(tǒng) ??????????????????????????????????????????????????????????????????????????????? 117 9.1 讓人頭疼的看板需求 ........................................................................... 117 9.2 BI 系統(tǒng)介紹 ......................................................................................... 119 9.2.1 什么是BI 系統(tǒng) ......................................................................... 119 9.2.2 BI 系統(tǒng)有哪些 .......................................................................... 119 9.2.3 BI 系統(tǒng)的相關(guān)人員................................................................... 120 9.2.4 BI 系統(tǒng)的特點 .......................................................................... 121 9.3 BI 系統(tǒng)的關(guān)鍵技術(shù) .............................................................................. 122 9.4 BI 系統(tǒng)實踐 ......................................................................................... 124 9.4.1 數(shù)據(jù)接入 ................................................................................... 125 9.4.2 數(shù)據(jù)集加工 ............................................................................... 127 9.4.3 數(shù)據(jù)集權(quán)限控制 ....................................................................... 129 9.4.4 可視化報表配置 ....................................................................... 130 9.4.5 可視化結(jié)果展示 ....................................................................... 136 9.4.6 數(shù)據(jù)分析OLAP ........................................................................ 137 9.4.7 如何衡量BI 系統(tǒng)是否成功 ...................................................... 142 第10 章 用戶畫像 ?????????????????????????????????????????????????????????????????????????? 143 10.1 用戶畫像的全貌 ................................................................................. 143 10.1.1 初識用戶畫像 ......................................................................... 144 10.1.2 基本概念 ................................................................................. 145 10.1.3 用戶畫像體系建設(shè) .................................................................. 146 10.1.4 人員配合流程 ......................................................................... 149 10.2 用戶畫像的需求 ................................................................................. 150 10.2.1 對內(nèi)需求盤點 ......................................................................... 151 10.2.2 對外競品調(diào)研 ......................................................................... 156 10.3 用戶畫像的規(guī)劃 ................................................................................. 158 10.3.1 用戶畫像的業(yè)務(wù)架構(gòu) .............................................................. 158 10.3.2 用戶畫像的產(chǎn)品架構(gòu) .............................................................. 159 10.3.3 用戶畫像的版本計劃 .............................................................. 162 10.3.4 用戶畫像的項目執(zhí)行計劃 ...................................................... 163 10.4 用戶ID 體系 ...................................................................................... 164 10.4.1 方法 ........................................................................................ 164 10.4.2 實施過程 ................................................................................. 166 10.5 標簽體系 ............................................................................................ 167 10.5.1 標簽分類 ................................................................................. 168 10.5.2 標簽分級 ................................................................................. 175 10.6 用戶畫像系統(tǒng)..................................................................................... 177 10.6.1 概述 ........................................................................................ 177 10.6.2 首頁 ........................................................................................ 178 10.6.3 洞察 ........................................................................................ 179 10.6.4 標簽廣場 ................................................................................. 180 10.6.5 人群 ........................................................................................ 181 10.6.6 系統(tǒng)管理 ................................................................................. 183 10.6.7 總結(jié) ........................................................................................ 183 10.7 用戶畫像的應(yīng)用 ................................................................................. 183 第11 章 電商反作弊體系 ????????????????????????????????????????????????????????????????? 189 11.1 “網(wǎng)絡(luò)黑產(chǎn)”的現(xiàn)狀 ......................................................................... 189 11.1.1 “網(wǎng)絡(luò)黑產(chǎn)薅羊毛”事件 ...................................................... 189 11.1.2 “網(wǎng)絡(luò)黑產(chǎn)”的類型 .............................................................. 190 11.1.3 電商“薅羊毛”場景 .............................................................. 191 11.1.4 “網(wǎng)絡(luò)黑產(chǎn)”的發(fā)展趨勢 ...................................................... 192 11.1.5 “網(wǎng)絡(luò)黑產(chǎn)”的作弊工具 ...................................................... 192 11.2 “網(wǎng)絡(luò)黑產(chǎn)”的防控方案 .................................................................. 194 11.2.1 活動的損失評估...................................................................... 194 11.2.2 反“網(wǎng)絡(luò)黑產(chǎn)”作弊案例 ...................................................... 194 第12 章 內(nèi)容個性化推薦 ????????????????????????????????????????????????????????????????? 201 12.1 資訊的內(nèi)容處理 ................................................................................. 201 12.1.1 資訊的內(nèi)容來源 ..................................................................... 202 12.1.2 資訊的分類體系 ..................................................................... 203 12.1.3 常見的分類問題及內(nèi)容分類原則 ........................................... 205 12.1.4 分類體系的構(gòu)建 ..................................................................... 206 12.1.5 內(nèi)容的標注與機器學習 .......................................................... 208 12.2 資訊用戶的畫像和特征 ..................................................................... 209 12.2.1 資訊用戶的畫像 ..................................................................... 209 12.2.2 資訊用戶的特征 ..................................................................... 209 12.3 資訊的推薦算法 ................................................................................. 211 12.3.1 資訊的信息抽取 ..................................................................... 211 12.3.2 資訊的分詞方法 ..................................................................... 212 12.3.3 資訊的過濾排重 ..................................................................... 213 12.3.4 資訊的召回模型 ..................................................................... 214 12.3.5 資訊的算法排序 ..................................................................... 216 12.4 資訊的重排策略及案例 ..................................................................... 216 12.4.1 常見的重排策略及策略的目標 ............................................... 216 12.4.2 資訊的重排策略案例 .............................................................. 217 第13 章 電商個性化推送 ????????????????????????????????????????????????????????????????? 221 13.1 push 的衡量 ........................................................................................ 222 13.1.1 push 的目標與本質(zhì) ................................................................. 222 13.1.2 push 的衡量指標 ..................................................................... 222 13.2 push 的優(yōu)化方向 ................................................................................ 223 13.2.1 效率高 .................................................................................... 223 13.2.2 算法準 .................................................................................... 224 13.2.3 推薦好 .................................................................................... 226 13.2.4 展示靚 .................................................................................... 227 13.3 push 的推薦案例 ................................................................................ 228 13.3.1 新用戶推薦方案 ..................................................................... 228 13.3.2 推薦的效果評測 ..................................................................... 232
你還可能感興趣
我要評論
|