怎樣成為合格的數(shù)據(jù)工程師

在通信、互聯(lián)網(wǎng)、金融等這些行業(yè)每天產(chǎn)生巨大的數(shù)據(jù)量（長期更是積累了大量豐富的數(shù)據(jù)，比如客戶交易數(shù)據(jù)等等），據(jù)說到2020年，全球每年產(chǎn)生的數(shù)據(jù)量達到3500萬億GB；海量的歷史數(shù)據(jù)是否有價值，是否可以利用為領導決策提供參考依據(jù)？隨著軟件工具、數(shù)據(jù)庫技術、各種硬件設備的飛快發(fā)展，使得我們分析海量數(shù)據(jù)成為可能。

而數(shù)據(jù)分析也越來越受到領導層的重視，借助報表告訴用戶什么已經(jīng)發(fā)生了，借助OLAP和可視化工具等分析工具告訴用戶為什么發(fā)生了，通過dashboard監(jiān)控告訴用戶現(xiàn)在在發(fā)生什么，通過預報告訴用戶什么可能會發(fā)生。數(shù)據(jù)分析會從海量數(shù)據(jù)中提取、挖掘對業(yè)務發(fā)展有價值的、潛在的知識，找出趨勢，為決策層的提供有力依據(jù)，為產(chǎn)品或服務發(fā)展方向起到積極作用，有力推動企業(yè)內部的科學化、信息化管理。

我們舉兩個通過數(shù)據(jù)分析獲得成功的例子：

（1） Facebook廣告與微博、SNS等網(wǎng)絡社區(qū)的用戶相聯(lián)系，通過先進的數(shù)據(jù)挖掘與分析技術，為廣告商提供更為精準定位的服務，該精準廣告模式收到廣大廣告商的熱捧，根據(jù)市場調研機構eMarketer的數(shù)據(jù)，F(xiàn)acebook年營收額超過20億美元，成為美國最大的在線顯示廣告提供商。

（2） Hitwise發(fā)布會上，亞太區(qū)負責人John舉例說明： 亞馬遜30%的銷售是來自其系統(tǒng)自動的產(chǎn)品推薦，通過客戶分類，測試統(tǒng)計，行為建模，投放優(yōu)化四步，運營客戶的行為數(shù)據(jù)帶來競爭優(yōu)勢。

此外，還有好多好多，數(shù)據(jù)分析，在營銷、金融、互聯(lián)網(wǎng)等方面應用是非常廣泛的：比如在營銷領域，有數(shù)據(jù)庫營銷，精準營銷，RFM分析，客戶分群，銷量預測等等；在金融上預測股價及其波動，套利模型等等；在互聯(lián)網(wǎng)電子商務上面，百度的精準廣告，淘寶的數(shù)據(jù)魔方等等。類似成功的案例會越來越多，以至于數(shù)據(jù)分析師也越來越受到重視。

然而，現(xiàn)實卻是另一種情況。我們來看一個來自微博上的信息：在美國目前面臨14萬~19萬具有數(shù)據(jù)分析和管理能力的專業(yè)人員，以及150萬具有理解和決策能力（基于對海量數(shù)據(jù)的研究）的管理人員和分析人員的人才短缺。而在中國，受過專業(yè)訓練并有經(jīng)驗的數(shù)據(jù)分析人才，未來三年，分析能力人才供需缺口將逐漸放大，高級分析人才難尋。也就是說，數(shù)據(jù)分析的需求在不斷增長，然而合格的為企業(yè)做分析決策的數(shù)據(jù)分析師卻寥寥無幾。好多人想做數(shù)據(jù)分析卻不知道如何入手，要么不懂得如何清洗數(shù)據(jù)，直接把數(shù)據(jù)拿來就用；要么亂套模型，分析的頭頭是道，其實完全不是那么回事。按俗話說就是：見過豬跑，沒吃過豬肉。

近幾年美國公布的相關數(shù)據(jù)分析中，薪酬最高、最吃香的行業(yè)中便有IT業(yè)。IT產(chǎn)業(yè)日益崛起，技術也被越來越多的人掌握，而往往最被看重的技能是：數(shù)據(jù)分析、風險管理、機器人技術、信息安全、網(wǎng)絡技術。數(shù)據(jù)分析排名第一最受青睞。接收到這樣的信號，一定有很多非專業(yè)人士也想成為數(shù)據(jù)分析師吧，如何速成數(shù)據(jù)分析師？下面的技能讓你事半功倍。

一：理解數(shù)據(jù)庫。

還以為要與文本數(shù)據(jù)打交道嗎？答案是：NO！進入了這個領域，你會發(fā)現(xiàn)幾乎一切都是用數(shù)據(jù)庫來存儲數(shù)據(jù)，如MySQL，Postgres，CouchDB，MongoDB，Cassandra等。理解數(shù)據(jù)庫并且能熟練使用它，將是一個基礎能力。

二：掌握數(shù)據(jù)整理、可視化和報表制作。

數(shù)據(jù)整理，是將原始數(shù)據(jù)轉換成方便實用的格式，實用工具有DataWrangler和R。數(shù)據(jù)可視化，是創(chuàng)建和研究數(shù)據(jù)的視覺表現(xiàn)，實用工具有ggvis，D3，vega。數(shù)據(jù)報表是將數(shù)據(jù)分析和結果制作成報告。也是數(shù)據(jù)分析師的一個后續(xù)工作。這項技能是做數(shù)據(jù)分析師的主要技能?？梢越柚滦蛙浖椭约貉杆賹W會分析。

三：懂設計

說到能制作報表成果，就不得不說說圖表的設計。在運用圖表表達數(shù)據(jù)分析師的觀點時，懂不懂設計直接影響到圖形的選擇、版式的設計、顏色的搭配等，只有掌握設計原則才能讓結果一目了然。否則圖表雜亂無章，數(shù)據(jù)分析內容不能良好地呈現(xiàn)出來，分析結果就不能有效地傳達。

四：幾項專業(yè)技能

統(tǒng)計學技能——統(tǒng)計學是數(shù)據(jù)分析的基礎，掌握統(tǒng)計學的基本知識是數(shù)據(jù)分析師的基本功。從數(shù)據(jù)采集、抽樣到具體分析時的驗證探索和預測都要用到統(tǒng)計學。

社會學技能——從社會化角度看，人有社會性，收群體心理的影響。數(shù)據(jù)分析師沒有社會學基本技能，很難對市場現(xiàn)象做出合理解釋。

另外，最好還能懂得財務管理知識和心理學概況。這些都將會使你做數(shù)據(jù)分析的過程更容易。

五：提升個人能力。

有了產(chǎn)品可以將數(shù)據(jù)展示出來，還需要具備基本的分析師能力。首先，要了解模型背后的邏輯，不能單純地在模型中看，而要放到整個項目的上下文中去看。要理解數(shù)據(jù)的信息，形成一個整體系統(tǒng)，這樣才能夠做好細節(jié)。另外，與數(shù)據(jù)打交道，細心和耐心也是必不可少的。

六：隨時貼近數(shù)據(jù)文化

擁有了數(shù)據(jù)分析的基本能力，還怕不夠專業(yè)？不如讓自己的生活中充滿數(shù)據(jù)分析的氣氛吧！試著多去數(shù)據(jù)分析的論壇看看，多瀏覽大數(shù)據(jù)知識的網(wǎng)站，讓自己無時無刻不在進步，還怕不能學會數(shù)據(jù)分析嗎？

擁有這些技能，再去做數(shù)據(jù)分析，數(shù)據(jù)將在你手里變得更親切，做數(shù)據(jù)分析也會更簡單更便捷，速成數(shù)據(jù)分析師不再遙遠。

有一位數(shù)據(jù)分析牛人曾經(jīng)總結過數(shù)據(jù)分析師的能力和目標：

能力：一定要懂點戰(zhàn)略、才能結合商業(yè)；一定要漂亮的presentation、才能buying；一定要有global view、才能打單；一定要懂業(yè)務、才能結合市場；一定要專幾種工具、才能干活；一定要學好、才能有效率；一定要有強悍理論基礎、才能入門；一定要努力、才能賺錢；最重要的：一定要務實、才有reputation；不懂的話以后慢慢就明白了。