對(duì)于很多剛接觸大數(shù)據(jù)的新手來(lái)說(shuō)，常常會(huì)問(wèn)的一個(gè)問(wèn)題就是“大數(shù)據(jù)開發(fā)用什么語(yǔ)言”，確實(shí)，大數(shù)據(jù)涉及到編程任務(wù)，肯定是需要掌握一定的編程語(yǔ)言基礎(chǔ)的。

大數(shù)據(jù)主要的編程語(yǔ)言

1、Java

大數(shù)據(jù)編程的第一語(yǔ)言，Java是不容置疑的。主流的大數(shù)據(jù)技術(shù)框架，基本上都是Java編程或者提供Java API，比如說(shuō)Hadoop，在龐大的生態(tài)圈支持下，不會(huì)Java是萬(wàn)萬(wàn)不行的。JavaSE必須掌握，JVM，多線程之類的都是必須掌握的，還有Java EE，在大數(shù)據(jù)開發(fā)當(dāng)中，常常需要寫接口。

2、Scala

大數(shù)據(jù)開發(fā)的第二語(yǔ)言，Scala也是必須有一定掌握的。與Scala緊密相關(guān)的就是Spark，Spark在大數(shù)據(jù)技術(shù)框架當(dāng)中，占據(jù)越來(lái)越重要的位置，Spark的源碼就是Scala寫的，要真正把Spark掌握到家，Scala源碼研讀是很有必要的。

3、Python

除了大數(shù)據(jù)開發(fā)，大數(shù)據(jù)的另一個(gè)重要方向，是大數(shù)據(jù)分析。而大數(shù)據(jù)分析，主流的語(yǔ)言選擇，就是Python，比R語(yǔ)言更受歡迎。Python尤其在數(shù)據(jù)分析和機(jī)器學(xué)習(xí)方面，有很多有用的庫(kù)，能夠大大提升工作效率。

另外，Python在數(shù)據(jù)可視化也提供了很多可用的包，比如說(shuō)Matplotit、Ploly、NetworkX、Pyga、ggart、Seborn、Altair等，同樣也是滿足相關(guān)需求的好幫手。

4、SQL

SQL其實(shí)不算是真正意義上的一門編程語(yǔ)言，但是在大數(shù)據(jù)當(dāng)中，對(duì)SQL的運(yùn)用真的太普遍的，除了基本的增刪改查，底層原理、底層優(yōu)化，是能夠?yàn)樽约捍蟠蠹臃值摹?/p>

5、Shell

shell也是必不可少的，大數(shù)據(jù)開發(fā)其實(shí)一般都會(huì)承擔(dān)起大數(shù)據(jù)集群的運(yùn)維工作，在運(yùn)維當(dāng)中，shell的重要性相信不必多說(shuō)。

大數(shù)據(jù)有代表性的產(chǎn)品

云存儲(chǔ)：中國(guó)比較好的有百度云，國(guó)外比較好的有AWS等。正是因?yàn)橛羞@些產(chǎn)品的出現(xiàn)，數(shù)據(jù)在云端的概念才終于變成現(xiàn)實(shí)了，大家都不用踹著U盤到處跑了。

內(nèi)容推薦：較具代表性的有今日頭條，它正是運(yùn)用了大數(shù)據(jù)技術(shù)來(lái)找到你喜歡的內(nèi)容并且推薦給你。自從這個(gè)產(chǎn)品出現(xiàn)以后已經(jīng)有很多人拋棄以前的新聞閱讀方式。它讓網(wǎng)易新聞、新浪新聞、騰訊新聞等產(chǎn)品上了不少火?，F(xiàn)在大家都開始紛紛的學(xué)習(xí)它。

物品推薦：電影網(wǎng)站、音樂(lè)網(wǎng)站、電商網(wǎng)站這些網(wǎng)站都會(huì)把根據(jù)你的瀏覽行為進(jìn)行分析，根據(jù)你的興趣推薦給你相應(yīng)的物品，比如愛奇藝、QQ音樂(lè)、京東等。

廣告計(jì)算：應(yīng)用比較好的有百度、谷歌、淘寶、騰訊，他們要根據(jù)廣告主的價(jià)格和廣告的效果計(jì)算廣告的排序，好在流量中達(dá)到最好的變現(xiàn)效果，這時(shí)數(shù)據(jù)的處理速度與數(shù)據(jù)的量級(jí)直接影響了他們的收入。

金融：銀行正使用大數(shù)據(jù)分析用戶的消費(fèi)行為、購(gòu)買能力以及還款能力，用來(lái)降低提供給用戶的貸款風(fēng)險(xiǎn)，減少環(huán)帳率。

信用：支付寶的芝麻信用加入了更多的維度，比如你的人際關(guān)系、學(xué)歷、車等等元素來(lái)評(píng)估你的信用值，給信用值高的人提供更好的服務(wù)，比如信用度高住酒店就不用交押金。

數(shù)據(jù)分析：這個(gè)具有代表性的產(chǎn)品不多，但確是大數(shù)據(jù)應(yīng)用非常主要的場(chǎng)景，一般都是公司內(nèi)部定制性的，所以一般不公開，但確實(shí)各種公司都在用，比如網(wǎng)站的流量分析、相關(guān)產(chǎn)品的用戶特性分析、微博的語(yǔ)義分析?？梢愿鶕?jù)這些分析為自己的業(yè)務(wù)或者產(chǎn)品發(fā)展方向提供決策依據(jù)。

智慧城市：這個(gè)現(xiàn)在比較有代表性的功能就是可以根據(jù)人流控制路燈的亮度，可以達(dá)到省電的效果。通過(guò)車流控制紅綠燈的變化，減少道路擁堵。

行業(yè)前景：大數(shù)據(jù)催生新興職業(yè)數(shù)據(jù)分析師成IT 界“大熊貓”

全球的數(shù)據(jù)量正在以每18個(gè)月翻一倍的驚人速度增長(zhǎng)，世界正在高速數(shù)字化，大數(shù)據(jù)堪比石油，如何掘金大數(shù)據(jù)是所有個(gè)人、企業(yè)和國(guó)家的機(jī)遇和挑戰(zhàn)。中國(guó)是人才大國(guó)，能理解和應(yīng)用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。大數(shù)據(jù)分析應(yīng)用已經(jīng)滲透到我們生活的方方面面，大數(shù)據(jù)人才缺口等你來(lái)填!

數(shù)據(jù)領(lǐng)域三個(gè)大的技術(shù)方向：

方向一、Hadoop 大數(shù)據(jù)開發(fā)方向;

方向二、數(shù)據(jù)挖掘、數(shù)據(jù)分析&機(jī)器學(xué)習(xí)方向;

方向三、大數(shù)據(jù)運(yùn)維&云計(jì)算方向。精通任何方向之一者，均會(huì)“ 前(錢)”途無(wú)量，而需要說(shuō)明的，三個(gè)方向中，數(shù)據(jù)挖掘、數(shù)據(jù)分析&機(jī)器學(xué)習(xí)是大數(shù)據(jù)催生新興職業(yè)數(shù)據(jù)分析師成IT 界“大熊貓”。

隨著大數(shù)據(jù)在國(guó)內(nèi)的發(fā)展，大數(shù)據(jù)相關(guān)人才卻出現(xiàn)了供不應(yīng)求的狀況，大數(shù)據(jù)分析師更是被媒體稱為“未來(lái)較具發(fā)展?jié)摿Φ穆殬I(yè)之一”。大數(shù)據(jù)分析師是做什么的?阿里巴巴集團(tuán)研究員薛貴榮就曾表示，“大數(shù)據(jù)分析師就是一群玩數(shù)據(jù)的人，玩出數(shù)據(jù)的商業(yè)價(jià)值，讓數(shù)據(jù)變成生產(chǎn)力。”而大數(shù)據(jù)和傳統(tǒng)數(shù)據(jù)的較大區(qū)別在于，它是在線的、實(shí)時(shí)的、規(guī)模海量且形式不規(guī)整，無(wú)章法可循，因此“會(huì)玩”這些數(shù)據(jù)的人就很重要。