大數(shù)據(jù)分析與應用

隨著云時代的來臨，大數(shù)據(jù)技術將具有越來越重要的戰(zhàn)略意義。大數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)和業(yè)務職能領域，逐漸成為重要的生產(chǎn)要素，人們對于海量數(shù)據(jù)的運用將預示著新一輪生產(chǎn)率增長和消費者盈余浪潮的到來。大數(shù)據(jù)分析技術將幫助企業(yè)用戶在合理時間內(nèi)攫取、管理、處理、整理海量數(shù)據(jù)，為企業(yè)經(jīng)營決策提供積極的幫助。大數(shù)據(jù)分析作為數(shù)據(jù)分析的前沿技術，廣泛應用于物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)等戰(zhàn)略性新興產(chǎn)業(yè)。雖然大數(shù)據(jù)目前在國內(nèi)還處于初級階段，但是其商業(yè)價值已經(jīng)顯現(xiàn)出來。為加強大數(shù)據(jù)分析創(chuàng)新發(fā)展頂層設計和科學布局，推動相關人員更好理解和掌握大數(shù)據(jù)分析的關鍵技術原理、未來發(fā)展方向，為此培養(yǎng)大數(shù)據(jù)分析高級工程師。

課程目標

• 掌握大數(shù)據(jù)帶來的行業(yè)價值；
• 了解大數(shù)據(jù)分析流程及常用方法；
• 熟悉大數(shù)據(jù)產(chǎn)業(yè)分工；
• 熟悉大數(shù)據(jù)分析帶來的新趨勢；
• 了解大數(shù)據(jù)分析在行業(yè)中的典型應用；

課程綱要

• 一 基礎概念
• 二 傳統(tǒng)數(shù)據(jù)分析的作用
• 三 什么是大數(shù)據(jù)（4V）
• 四 大數(shù)據(jù)概念提出的歷史背景
• 五 大數(shù)據(jù)產(chǎn)業(yè)現(xiàn)狀
• 六 產(chǎn)業(yè)實踐（號稱”大數(shù)據(jù)“的企業(yè)，都在做什么？）

• 一 大數(shù)據(jù)分析方法與難點
• 二 大數(shù)據(jù)相關職位
• 三 “數(shù)據(jù)科學“
• 四 大數(shù)據(jù)分析帶來的新趨勢

• 一 分布式文件系統(tǒng)和并行計算框架
• 二 云計算（不得不提的云計算，大數(shù)據(jù)技術得以實現(xiàn)的基礎）
• 三 Hadoop
• 四 NoSQL Database
• 五 Storm，Spark，etc.

• 一 應用領域：對關系的探查；聚類/分類；數(shù)值預測；模式識別；機器翻譯
• 二 經(jīng)典案例：Google疾病預測，電影票房預測，google的關于學習詞的表示：Learning the meaning behind words；百度地圖；微博輿情分析；大悅城促銷等

• 一 數(shù)據(jù)分析技術對人們生活的影響
• 二 各種數(shù)據(jù)分析平臺，百度數(shù)據(jù)工廠，微軟Avocado
• 三 應用大數(shù)據(jù)的產(chǎn)品（兒童手環(huán)等）
• 四 更深層影響