大數據分析方法簡介

1. FAQ

  • 我們可以用傳統的推論統計和多變量分析方法來做大數據分析嗎?

  • 目前商業界是用什麼技術做數據分析呢?

  • 它和傳統分析方法有什麼差別? 為什麼會有這些差別呢?

  • 做大數據一定要用大電腦嗎? 用個人(筆記型)電腦也能學著做嗎?

  • 到底要多學哪一些東西? 有教科書嗎? 有(線上)課程可以上嗎?

2. 大數據的特徵

  • 資料點數、欄位數都很大

  • 真實行為資料,全部的資料

  • 內部資料 + 外部資料

  • 結構化資料 + 非結構化資料

  • 開源軟體、免費資料分析工具

  • 平行運算、雲端資源

3. 預測性模型的商業應用

  • Google/Facebook用它來預測使用者會點擊廣告的機率

  • Amazon/Netflix用它來預測顧客會喜歡什麼產品/電影

  • 電信公司用它來預測用戶合約到期之後會不會續約

  • 網路信貸用它來預測借款人的債信等級

  • 人事部門用來預估員工的離職機率

  • ...

4. 不同的目的

 

5. 效果的差異

 

6. 設備的需求

 

7. 分析方法的互補

8. 參考書籍

9. 免費線上課程