CDA數(shù)據(jù)分析員培訓(xùn)

CDA數(shù)據(jù)分析員培訓(xùn)
【授課對象】
本課程要求有一定的數(shù)學(xué)基礎(chǔ)，掌握概率論和統(tǒng)計理論基礎(chǔ)，有一定的數(shù)據(jù)分析經(jīng)驗。
適合于如下人員：數(shù)據(jù)分析師、大數(shù)據(jù)系統(tǒng)研發(fā)人員、大數(shù)據(jù)系統(tǒng)架構(gòu)師、業(yè)務(wù)支撐部等對業(yè)務(wù)數(shù)據(jù)分析與挖掘有專業(yè)要求的相關(guān)人員。
【課程目標(biāo)】
CDA（Certified Data Analyst）全稱“注冊數(shù)據(jù)分析師”，由“CERTIFIED DATA ANALYST INSTITUTE（CDA數(shù)據(jù)分析師協(xié)會）”發(fā)起成立的職業(yè)簡稱，旨在培養(yǎng)正規(guī)化、科學(xué)化、專業(yè)化的數(shù)據(jù)分析人才隊伍，進(jìn)一步提升數(shù)據(jù)分析師的職業(yè)素養(yǎng)與能力水平，促進(jìn)數(shù)據(jù)分析行業(yè)的高質(zhì)量持續(xù)快速發(fā)展。CDA數(shù)據(jù)分析師面向商業(yè)職場數(shù)據(jù)分析，分為三個等級，在國內(nèi)由人大經(jīng)濟(jì)論壇主辦資格考試，通過考試者可以獲得CDA協(xié)會頒發(fā)的數(shù)據(jù)分析師資格證書，此證書代表數(shù)據(jù)分析師人才技能水平，為企業(yè)事業(yè)單位選拔和聘用專業(yè)人才的參考依據(jù)。
本課程基于CDA的認(rèn)證知識要求，圍繞商業(yè)問題，全面介紹了數(shù)據(jù)挖掘的標(biāo)準(zhǔn)流程，數(shù)據(jù)預(yù)處理，數(shù)據(jù)挖掘方法，數(shù)據(jù)挖掘模型，模型評估，模型參數(shù)優(yōu)化，等等，使得學(xué)員掌握數(shù)據(jù)挖掘的方法、模型、工具。
通過本課程的學(xué)習(xí)，達(dá)到如下目的：
了解數(shù)據(jù)分析與數(shù)據(jù)挖掘的基本知識，理解大數(shù)據(jù)思維方式。
掌握數(shù)據(jù)挖掘的基本過程和步驟，掌握數(shù)據(jù)挖掘的思路和框架。
能夠理解分析模型原理，掌握模型應(yīng)用場景，能夠利用模型解決復(fù)雜的商業(yè)問題。
掌握常用的數(shù)據(jù)模型，能夠根據(jù)商業(yè)問題選擇合適的分析模型。
熟悉SPSS基本操作，掌握分析操作，能夠解讀分析結(jié)果，并轉(zhuǎn)化為業(yè)務(wù)策略。
【授課時間】
4~5天時間
【學(xué)員要求】
每個學(xué)員自備一臺便攜機(jī)(必須)。
便攜機(jī)中事先安裝好Excel 2013軟件。
便攜機(jī)中事先安裝好SPSS v19軟件。
注：講師可以提供試用版本軟件及分析數(shù)據(jù)源。
【授課方式】
基礎(chǔ)知識精講 + 案例講解 + 操作演練 + 實(shí)際業(yè)務(wù)問題分析 + SPSS實(shí)際操作
本課程突出數(shù)據(jù)挖掘的實(shí)際應(yīng)用，結(jié)合行業(yè)的典型應(yīng)用特點(diǎn)，從實(shí)際問題入手，引出相關(guān)知識，進(jìn)行大數(shù)據(jù)的收集與處理；引導(dǎo)學(xué)員思考，構(gòu)建分析模型，進(jìn)行數(shù)據(jù)分析與挖掘，以及數(shù)據(jù)呈現(xiàn)與解讀，全過程演練操作，以達(dá)到提升學(xué)員的數(shù)據(jù)綜合分析能力，支撐運(yùn)營決策的目的。
【課程大綱】
第一部分：數(shù)據(jù)集基礎(chǔ)知識（了解你的數(shù)據(jù)集）
數(shù)據(jù)集概述
數(shù)據(jù)集的類型
數(shù)據(jù)集屬性的類型
標(biāo)稱
序數(shù)
度量
數(shù)據(jù)質(zhì)量三要素
準(zhǔn)確性
完整性
一致性
數(shù)據(jù)預(yù)處理的內(nèi)容
數(shù)據(jù)清理（缺失值、離群值的處理方法）
數(shù)據(jù)歸約（維災(zāi)難、維歸約、主成分分析）
特征子集選擇
特征創(chuàng)建/屬性構(gòu)造
數(shù)據(jù)離散化和二元化
屬性/變量轉(zhuǎn)換
數(shù)據(jù)探索性分析
統(tǒng)計匯總
可視化
演練：描述性分析（頻數(shù)、描述、探索、分類匯總）
第二部分：數(shù)據(jù)挖掘流程（基礎(chǔ)，決定你的高度）
數(shù)據(jù)挖掘概述
數(shù)據(jù)挖掘的標(biāo)準(zhǔn)流程（CRISP-DM）
商業(yè)理解
數(shù)據(jù)準(zhǔn)備
數(shù)據(jù)理解
模型建立
模型評估
模型應(yīng)用
案例：4G終端營銷項目挖掘過程分析
案例：客戶匹配度模型—數(shù)據(jù)建模
常用數(shù)據(jù)統(tǒng)計指標(biāo)
集中程度：均值、中位數(shù)、眾數(shù)
離開程度：方差、標(biāo)準(zhǔn)差、極差
分布趨勢：偏度、峰度
理解分布：正態(tài)分布、T分布、F分布
SPSS基本操作（預(yù)處理）
數(shù)據(jù)導(dǎo)入
數(shù)據(jù)排序（排序個案）
重復(fù)數(shù)據(jù)處理（標(biāo)識重復(fù)個案）
缺失值處理（替換缺失值）
生成新變量（計算變量、重新編碼）
數(shù)據(jù)分組（分類匯總）
數(shù)據(jù)合并（合并文件）
演練：SPSS基本操作
第三部分：數(shù)據(jù)挖掘?qū)崙?zhàn)篇
參數(shù)檢驗分析（樣本均值檢驗）
商業(yè)問題：如何驗證營銷效果的有效性？
參數(shù)檢驗概述
單樣本T檢驗
兩獨(dú)立樣本T檢驗
兩配對樣本T檢驗
參數(shù)檢驗原理以及步驟
參數(shù)檢驗適用場景
案例：電信運(yùn)營商的ARPU值評估分析（單樣本）
案例：信用卡消費(fèi)金額評估分析（單樣本）
案例：營銷方式與產(chǎn)品銷量的影響分析（兩獨(dú)立樣本）
案例：吸煙與膽固醇升高的分析（兩獨(dú)立樣本）
案例：營銷方式有效性評估（兩配對樣本）
案例：減肥效果評估（兩配對樣本）
非參數(shù)檢驗分析（樣本分布檢驗）
商業(yè)問題：這些屬性數(shù)據(jù)的分布情況如何？如何從數(shù)據(jù)分布中看出問題？
非參數(shù)檢驗概述
單樣本檢驗
兩獨(dú)立樣本檢驗
兩相關(guān)樣本檢驗
兩配對樣本檢驗
非參數(shù)檢驗原理
卡方檢驗、二項分布、游程檢驗的原理及適用場景
案例：死亡分布檢驗（單樣本-卡方檢驗）
案例：產(chǎn)品合格率檢驗（單樣本-二項分布）
案例：身高分布差異檢驗（單樣本-KS檢驗）
案例：設(shè)備正常工作檢驗（單樣本-隨機(jī)分布）
案例：制造工藝差異檢驗（兩獨(dú)立樣本-MW檢驗）
案例：訓(xùn)練新方法有效性檢驗（兩配對樣本-符號/秩檢驗）
案例：促銷方式效果檢驗(多相關(guān)樣本-Friedman檢驗)
案例：客戶滿意度差異檢驗(多相關(guān)樣本-Cochran Q檢驗)
案例：評委評判黑幕檢驗（多相關(guān)樣本-Kendall W檢驗）
相關(guān)分析（相關(guān)程度計算）
商業(yè)問題：這兩個屬性是否會相互影響？影響程度大嗎？
相關(guān)分析概述
計算相關(guān)系數(shù)的三個公式
案例：家庭生活開支的相關(guān)分析（Pearson簡單相關(guān)系數(shù)）
案例：營銷費(fèi)用與銷售額的相關(guān)分析
案例：哪些因素與汽車銷量有相關(guān)性
案例：腰圍與體重的相關(guān)分析（偏相關(guān)分析）
方差分析（影響因素分析）
商業(yè)問題：哪些才是影響銷量的關(guān)鍵因素？
方差分析原理
方差分析的步驟
方差分析適用場景
如何解讀方差分析結(jié)果
案例：終端陳列位置對終端銷量的影響分析（單因素）
案例：廣告形式、地區(qū)對銷量的影響因素分析（多因素）
案例：2015年大學(xué)生工資與父母職業(yè)的關(guān)系
案例：飼料對生豬體重的影響分析（協(xié)方差分析）
回歸分析（預(yù)測分析）
商業(yè)問題：如何預(yù)測未來的銷售量（定量分析）？
回歸分析概述及適用場景
回歸分析的檢驗過程
如何選擇最優(yōu)回歸模型
解讀回歸分析結(jié)果
案例：推廣費(fèi)用、辦公費(fèi)用與銷售額的關(guān)系（線性回歸）
案例：人均現(xiàn)金消費(fèi)支出對人均食品消費(fèi)支出的影響（曲線回歸）
帶分類變量的回歸分析
比如，如何預(yù)測隨著季節(jié)性變化的銷量情況
案例：員工工齡、性別與終端銷售的關(guān)系分析
案例：產(chǎn)品銷量的季節(jié)性變化預(yù)測
邏輯回歸分析（預(yù)測分析）
商業(yè)問題：如果評估用戶購買某產(chǎn)品的概率？
邏輯回歸分析原理
邏輯回歸分析的適用場景
案例：客戶購買預(yù)測分析（二元邏輯回歸）
案例：品牌選擇預(yù)測分析（多項邏輯回歸）
時間序列分析（預(yù)測分析）
商業(yè)問題：隨著時間變化，未來的銷量變化趨勢如何？
時序分析概述
移動平均MA模型
指數(shù)平滑ES模型
自回歸滑動平均ARIMA模型
季節(jié)分解模型
時序分析適用場景
案例：汽車銷量預(yù)測分析（指數(shù)平滑）
案例：上交所指數(shù)收益率預(yù)測分析（ARIMA）
案例：服裝銷售數(shù)據(jù)季節(jié)性趨勢預(yù)測分析（季節(jié)分解）
第四部分：高級數(shù)據(jù)挖掘方法
聚類分析（Clustering）
商業(yè)問題：我們的客戶有幾類？各類特征是什么？
聚類方法原理介紹
聚類方法適用場景
系統(tǒng)聚類（層次聚類）算法原理
如何判定最佳聚類類別數(shù)量
案例：數(shù)據(jù)聚類分析--小康指數(shù)劃分（Q型聚類）
案例：變量聚類分析--裁判標(biāo)準(zhǔn)一致性分析（R型聚類）
K均值聚類（快速聚類）算法原理
案例：移動三大品牌細(xì)分市場合適嗎？
案例：如何評選優(yōu)秀員工（固定聚類中心）
演練：如何選擇新產(chǎn)品試銷地點(diǎn)？
決策樹分類分析（Classification）
商業(yè)問題：這類客戶有什么特征？有什么潛在銷售機(jī)會？
決策樹原理介紹
構(gòu)建決策樹的三個關(guān)鍵問題
如何選擇最佳屬性來構(gòu)建節(jié)點(diǎn)
如何分裂變量
修剪決策樹
選擇最優(yōu)屬性
熵、基尼索引、分類錯誤
屬性劃分增益
如何分裂變量
多元劃分與二元劃分
連續(xù)變量離散化（最優(yōu)劃分點(diǎn)）
修剪決策樹
剪枝原則
預(yù)剪枝與后剪枝
如何評估分類性能
案例：銀行低信用客戶特征分析（決策樹分類）
基于規(guī)則的分類
基于規(guī)則分類原理介紹
評估規(guī)則的質(zhì)量
構(gòu)建分類規(guī)則：順序覆蓋法
規(guī)則增長策略
最近鄰分類
樸素貝葉斯分類
貝葉斯分類原理
計算類別屬性的條件概率
估計連續(xù)屬性的條件概率
預(yù)測分類概率（計算概率）
案例：評估銀行用戶拖欠貨款的概率
人工神經(jīng)網(wǎng)絡(luò)（ANN）
神經(jīng)網(wǎng)絡(luò)基本原理
神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)
ANN關(guān)鍵問題
MLP與RBF
案例：評估銀行用戶拖欠貨款的概率
判別分析
判別分析原理
距離判別法
典型判別法
貝葉斯判別法
案例：MBA學(xué)生錄取判別分析
案例：上市公司類別評估
關(guān)聯(lián)分析（Association）
商業(yè)問題：購買A產(chǎn)品的顧客還常常要購買其他什么產(chǎn)品？
關(guān)聯(lián)規(guī)則原理介紹
關(guān)聯(lián)規(guī)則的兩個關(guān)鍵參數(shù)
支持度
置信度
Apriori算法介紹
FP-Growth算法介紹
關(guān)聯(lián)規(guī)則適用場景
案例：商品套餐設(shè)計、商品交叉銷售（關(guān)聯(lián)分析）
客戶價值評估RFM模型
商業(yè)問題：如何評估客戶的價值？不同價值客戶的營銷策略有什么區(qū)別？
RFM模型介紹
RFM模型用戶分類與業(yè)務(wù)策略
RFM與客戶活躍度分析
案例：客戶價值如何評估（什么才是VIP用戶）
案例：如何選擇促銷用戶（響應(yīng)模型與促銷）
案例：回頭客用戶特征分析（決策樹分析）
主成分分析
主成分分析方法介紹
主成分分析基本思想
主成分分析步驟
案例：評估汽車購買者關(guān)注的哪些因素
第五部分：統(tǒng)計圖表篇（看圖說話）
柱狀圖/線圖/餅圖/高低圖/箱圖/散點(diǎn)圖/直方圖
圖形的表達(dá)及適用場景
案例：各種圖形繪制
實(shí)戰(zhàn)1：客戶流失預(yù)警與客戶挽留之真實(shí)數(shù)據(jù)分析實(shí)踐
實(shí)戰(zhàn)2：銀行信用風(fēng)險分析
結(jié)束：課程總結(jié)與問題答疑。

駱飛老師的其它課程