大數(shù)據(jù)分析工程師和大數(shù)據(jù)開(kāi)發(fā)工程師分別能做什么?

通俗解釋開(kāi)發(fā)和分析

非要把他倆分開(kāi)的話，一個(gè)是偏向于數(shù)據(jù)，一個(gè)偏向于工程。好比要炒個(gè)菜，工程師是燒火、顛勺的那個(gè)，偏向于工具的使用。分析師是放調(diào)料、掌握火候的那個(gè)，偏向菜怎么做好吃。

數(shù)據(jù)影響生活

數(shù)據(jù)越來(lái)越多的影響并塑造著那些我們每天都要交互的系統(tǒng)。不管是你使用Siri，google搜索，還是瀏覽facebook的好友動(dòng)態(tài)，你都在消費(fèi)者數(shù)據(jù)分析的結(jié)果。我們賦予了數(shù)據(jù)如此大的轉(zhuǎn)變的能力，也難怪近幾年越來(lái)越多的數(shù)據(jù)相關(guān)的角色被創(chuàng)造出來(lái)。

這些角色的職責(zé)范圍，從預(yù)測(cè)未來(lái)，到發(fā)現(xiàn)你周圍世界的模式，到建設(shè)操作著數(shù)百萬(wàn)記錄的系統(tǒng)。在這篇文章中。我們將討論不同的數(shù)據(jù)相關(guān)的角色，他們?nèi)绾谓M合在一起，并且?guī)湍阏页瞿切┙巧沁m合你自己的。互聯(lián)網(wǎng)科技發(fā)展蓬勃興起，人工智能時(shí)代來(lái)臨，抓住下一個(gè)風(fēng)口。為幫助那些往想互聯(lián)網(wǎng)方向轉(zhuǎn)行想學(xué)習(xí)，卻因?yàn)闀r(shí)間不夠，資源不足而放棄的人。

什么是數(shù)據(jù)分析工程師?

數(shù)據(jù)分析通過(guò)談?wù)摂?shù)據(jù)來(lái)向他們的公司傳遞價(jià)值，用數(shù)據(jù)來(lái)回答問(wèn)題，交流結(jié)果來(lái)幫助做商業(yè)決策。數(shù)據(jù)分析師的一般工作包括數(shù)據(jù)清洗，執(zhí)行分析和數(shù)據(jù)可視化。

取決于行業(yè)，數(shù)據(jù)分析師可能有不同的頭銜(比如：商業(yè)分析師，商業(yè)智能分析師，業(yè)務(wù)/運(yùn)營(yíng)分析師，數(shù)據(jù)分析師)不管頭銜是什么，數(shù)據(jù)分析師是一個(gè)能適應(yīng)不同角色和團(tuán)隊(duì)的多面手以幫助別人做出更好的數(shù)據(jù)驅(qū)動(dòng)的決策。

深度解析數(shù)據(jù)分析師

數(shù)據(jù)分析師擁有把傳統(tǒng)的商業(yè)方式轉(zhuǎn)換成數(shù)據(jù)驅(qū)動(dòng)的商業(yè)方式的潛質(zhì)。雖然數(shù)據(jù)分析師是數(shù)據(jù)廣泛領(lǐng)域的入門水平，但不是說(shuō)所有的分析師都是低水平的。數(shù)據(jù)分析師不僅僅精通技術(shù)工具，還是高效的交流者，他們對(duì)于那些把技術(shù)團(tuán)隊(duì)和商業(yè)團(tuán)隊(duì)隔離的公司是至關(guān)重要的。

他們的核心職責(zé)是幫助其他人追蹤進(jìn)展和優(yōu)化目標(biāo)。市場(chǎng)人員如何使用分析的數(shù)據(jù)幫助他們安排下一次活動(dòng)?銷售人員如何衡量哪種類型人群能更好的爭(zhēng)取?CEO如何更好的理解最近公司發(fā)展背后潛在原因?這些問(wèn)題就需要數(shù)據(jù)分析師通過(guò)數(shù)據(jù)分析和呈現(xiàn)結(jié)果來(lái)給答案。他們從事的這些和數(shù)據(jù)打交道的復(fù)雜工作能夠?yàn)樗麄兯诘慕M織貢獻(xiàn)價(jià)值。

一個(gè)高效的數(shù)據(jù)分析師能夠在商業(yè)決策的時(shí)候摒棄臆想和猜測(cè)，并且?guī)椭麄€(gè)組織快速成長(zhǎng)。數(shù)據(jù)分析師必須是一個(gè)橫跨在不同團(tuán)隊(duì)中的有效橋梁。通過(guò)分析新的數(shù)據(jù)，綜合不同的報(bào)告，翻譯整體的產(chǎn)出。反過(guò)來(lái)，這也能幫助組織對(duì)于自身的發(fā)展時(shí)刻保持警覺(jué)。

公司的不同需求決定了數(shù)據(jù)分析師的技能要求，但是下面這些應(yīng)該是通用的：

• 清洗和組織未加工的數(shù)據(jù)
• 使用描述性統(tǒng)計(jì)來(lái)得到數(shù)據(jù)的全局視圖
• 分析在數(shù)據(jù)中發(fā)現(xiàn)的有趣趨勢(shì)
• 創(chuàng)建數(shù)據(jù)可視化和儀表盤來(lái)幫助公司解讀說(shuō)明和使用數(shù)據(jù)做決策
• 呈現(xiàn)針對(duì)商業(yè)客戶或者內(nèi)部團(tuán)隊(duì)的科學(xué)分析的結(jié)果

數(shù)據(jù)分析師對(duì)公司科技和分科技的兩面都帶來(lái)了重大的價(jià)值。不管是進(jìn)行探索性的分析還是解讀經(jīng)營(yíng)狀況的儀表盤。分析師都促進(jìn)了團(tuán)隊(duì)之間更緊密的連接。

什么是數(shù)據(jù)開(kāi)發(fā)工程師?

數(shù)據(jù)工程師建設(shè)和優(yōu)化系統(tǒng)。這些系統(tǒng)幫助數(shù)據(jù)科學(xué)家和數(shù)據(jù)分析師開(kāi)展他們的工作。每一個(gè)公司里面和數(shù)據(jù)打交道的人都需要依賴于這些數(shù)據(jù)是準(zhǔn)確的和可獲取的。數(shù)據(jù)工程師保證任何數(shù)據(jù)都是正常可接收的，可轉(zhuǎn)換的，可存儲(chǔ)的并且對(duì)于使用者來(lái)說(shuō)是可獲取的。

深度解析數(shù)據(jù)工程師

數(shù)據(jù)工程師建立了數(shù)據(jù)分析師和數(shù)據(jù)科學(xué)家依賴的基礎(chǔ)。數(shù)據(jù)工程師對(duì)構(gòu)造數(shù)據(jù)管道并且經(jīng)常需要去使用復(fù)雜的工具和技術(shù)來(lái)管理數(shù)據(jù)負(fù)責(zé)。不想前面說(shuō)的兩個(gè)事業(yè)的路徑，數(shù)據(jù)工程師更多的是朝著軟件開(kāi)發(fā)能力上學(xué)習(xí)和提升。

在比較大的組織中，數(shù)據(jù)工程師需要關(guān)注不同的方面：比如使用數(shù)據(jù)的工具，維護(hù)數(shù)據(jù)庫(kù)，創(chuàng)建和管理數(shù)據(jù)管道。不管側(cè)重于什么，一個(gè)好的數(shù)據(jù)工程師能夠保證數(shù)據(jù)科學(xué)家和數(shù)據(jù)分析師專注于解決分析方面的問(wèn)題，而不是一個(gè)數(shù)據(jù)源一個(gè)數(shù)據(jù)源的去移動(dòng)、操作數(shù)據(jù)。

數(shù)據(jù)工程師往往更加注重建設(shè)和優(yōu)化。

下面的任務(wù)的示例是數(shù)據(jù)工程師通常的工作：

• 為數(shù)據(jù)消費(fèi)開(kāi)發(fā)API
• 在現(xiàn)存的數(shù)據(jù)管道中整合數(shù)據(jù)集
• 在新數(shù)據(jù)上運(yùn)用特征轉(zhuǎn)換提供給機(jī)器學(xué)習(xí)模型
• 持續(xù)不斷的監(jiān)控和測(cè)試系統(tǒng)保證性能優(yōu)化

你的數(shù)據(jù)驅(qū)動(dòng)的事業(yè)路徑：

現(xiàn)在你已經(jīng)了解了這三種數(shù)據(jù)驅(qū)動(dòng)的工作了，但是問(wèn)題還在，你適合哪一種呢?雖然都是和數(shù)據(jù)相關(guān)，但是這三種工作是截然不同的。

數(shù)據(jù)工程師主要工作在后端。持續(xù)的提升數(shù)據(jù)管道來(lái)保證數(shù)據(jù)的精確和可獲取。他們一般利用不同的工具來(lái)保證數(shù)據(jù)被正確的處理了，并且當(dāng)用戶要使用數(shù)據(jù)的時(shí)候保證數(shù)據(jù)是可用的。一個(gè)好的的數(shù)據(jù)工程師會(huì)為組織節(jié)省很多的時(shí)間和精力。

數(shù)據(jù)分析師一般用數(shù)據(jù)工程師提供的現(xiàn)成的接口來(lái)抽取新的數(shù)據(jù)，然后取發(fā)現(xiàn)數(shù)據(jù)中的趨勢(shì)。同時(shí)也要分析異常情況。數(shù)據(jù)分析師以一種清晰的方式來(lái)概括和提出他們的結(jié)果來(lái)讓非技術(shù)的團(tuán)隊(duì)更好的理解他們現(xiàn)在在做的東西。

***，數(shù)據(jù)科學(xué)家更傾向于基于分析的發(fā)現(xiàn)和在更多可能性上的調(diào)查來(lái)獲得方向。不管是訓(xùn)練模型還是進(jìn)行統(tǒng)計(jì)分析，數(shù)據(jù)科學(xué)家試圖去對(duì)未來(lái)要發(fā)生的可能性提出一個(gè)更好的預(yù)測(cè)。

不管你的特殊的路徑是什么，好奇心都是這三個(gè)職業(yè)最本質(zhì)的要求。使用數(shù)據(jù)來(lái)更好的提問(wèn)和進(jìn)行精確的實(shí)驗(yàn)是數(shù)據(jù)驅(qū)動(dòng)事業(yè)的全部目標(biāo)。此外，數(shù)據(jù)科學(xué)家領(lǐng)域是不斷的進(jìn)化的，你必須要有強(qiáng)大的能力去持續(xù)不斷的學(xué)習(xí)。

以上僅個(gè)人見(jiàn)解，希望對(duì)你有所幫助。