對于很多剛接觸大數(shù)據(jù)的新手來說，常常會問的一個問題就是“大數(shù)據(jù)開發(fā)用什么語言”，確實，大數(shù)據(jù)涉及到編程任務(wù)，肯定是需要掌握一定的編程語言基礎(chǔ)的。

大數(shù)據(jù)主要的編程語言

1、Java

大數(shù)據(jù)編程的第一語言，Java是不容置疑的。主流的大數(shù)據(jù)技術(shù)框架，基本上都是Java編程或者提供Java API，比如說Hadoop，在龐大的生態(tài)圈支持下，不會Java是萬萬不行的。JavaSE必須掌握，JVM，多線程之類的都是必須掌握的，還有Java EE，在大數(shù)據(jù)開發(fā)當(dāng)中，常常需要寫接口。

2、Scala

大數(shù)據(jù)開發(fā)的第二語言，Scala也是必須有一定掌握的。與Scala緊密相關(guān)的就是Spark，Spark在大數(shù)據(jù)技術(shù)框架當(dāng)中，占據(jù)越來越重要的位置，Spark的源碼就是Scala寫的，要真正把Spark掌握到家，Scala源碼研讀是很有必要的。

3、Python

除了大數(shù)據(jù)開發(fā)，大數(shù)據(jù)的另一個重要方向，是大數(shù)據(jù)分析。而大數(shù)據(jù)分析，主流的語言選擇，就是Python，比R語言更受歡迎。Python尤其在數(shù)據(jù)分析和機器學(xué)習(xí)方面，有很多有用的庫，能夠大大提升工作效率。

另外，Python在數(shù)據(jù)可視化也提供了很多可用的包，比如說Matplotit、Ploly、NetworkX、Pyga、ggart、Seborn、Altair等，同樣也是滿足相關(guān)需求的好幫手。

4、SQL

SQL其實不算是真正意義上的一門編程語言，但是在大數(shù)據(jù)當(dāng)中，對SQL的運用真的太普遍的，除了基本的增刪改查，底層原理、底層優(yōu)化，是能夠為自己大大加分的。

5、Shell

shell也是必不可少的，大數(shù)據(jù)開發(fā)其實一般都會承擔(dān)起大數(shù)據(jù)集群的運維工作，在運維當(dāng)中，shell的重要性相信不必多說。

大數(shù)據(jù)有代表性的產(chǎn)品

云存儲：中國比較好的有百度云，國外比較好的有AWS等。正是因為有這些產(chǎn)品的出現(xiàn)，數(shù)據(jù)在云端的概念才終于變成現(xiàn)實了，大家都不用踹著U盤到處跑了。

內(nèi)容推薦：較具代表性的有今日頭條，它正是運用了大數(shù)據(jù)技術(shù)來找到你喜歡的內(nèi)容并且推薦給你。自從這個產(chǎn)品出現(xiàn)以后已經(jīng)有很多人拋棄以前的新聞閱讀方式。它讓網(wǎng)易新聞、新浪新聞、騰訊新聞等產(chǎn)品上了不少火?，F(xiàn)在大家都開始紛紛的學(xué)習(xí)它。

物品推薦：電影網(wǎng)站、音樂網(wǎng)站、電商網(wǎng)站這些網(wǎng)站都會把根據(jù)你的瀏覽行為進行分析，根據(jù)你的興趣推薦給你相應(yīng)的物品，比如愛奇藝、QQ音樂、京東等。

廣告計算：應(yīng)用比較好的有百度、谷歌、淘寶、騰訊，他們要根據(jù)廣告主的價格和廣告的效果計算廣告的排序，好在流量中達到最好的變現(xiàn)效果，這時數(shù)據(jù)的處理速度與數(shù)據(jù)的量級直接影響了他們的收入。

金融：銀行正使用大數(shù)據(jù)分析用戶的消費行為、購買能力以及還款能力，用來降低提供給用戶的貸款風(fēng)險，減少環(huán)帳率。

信用：支付寶的芝麻信用加入了更多的維度，比如你的人際關(guān)系、學(xué)歷、車等等元素來評估你的信用值，給信用值高的人提供更好的服務(wù)，比如信用度高住酒店就不用交押金。

數(shù)據(jù)分析：這個具有代表性的產(chǎn)品不多，但確是大數(shù)據(jù)應(yīng)用非常主要的場景，一般都是公司內(nèi)部定制性的，所以一般不公開，但確實各種公司都在用，比如網(wǎng)站的流量分析、相關(guān)產(chǎn)品的用戶特性分析、微博的語義分析?？梢愿鶕?jù)這些分析為自己的業(yè)務(wù)或者產(chǎn)品發(fā)展方向提供決策依據(jù)。

智慧城市：這個現(xiàn)在比較有代表性的功能就是可以根據(jù)人流控制路燈的亮度，可以達到省電的效果。通過車流控制紅綠燈的變化，減少道路擁堵。

行業(yè)前景：大數(shù)據(jù)催生新興職業(yè)數(shù)據(jù)分析師成IT 界“大熊貓”

全球的數(shù)據(jù)量正在以每18個月翻一倍的驚人速度增長，世界正在高速數(shù)字化，大數(shù)據(jù)堪比石油，如何掘金大數(shù)據(jù)是所有個人、企業(yè)和國家的機遇和挑戰(zhàn)。中國是人才大國，能理解和應(yīng)用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。大數(shù)據(jù)分析應(yīng)用已經(jīng)滲透到我們生活的方方面面，大數(shù)據(jù)人才缺口等你來填!

數(shù)據(jù)領(lǐng)域三個大的技術(shù)方向：

方向一、Hadoop 大數(shù)據(jù)開發(fā)方向;

方向二、數(shù)據(jù)挖掘、數(shù)據(jù)分析&機器學(xué)習(xí)方向;

方向三、大數(shù)據(jù)運維&云計算方向。精通任何方向之一者，均會“ 前(錢)”途無量，而需要說明的，三個方向中，數(shù)據(jù)挖掘、數(shù)據(jù)分析&機器學(xué)習(xí)是大數(shù)據(jù)催生新興職業(yè)數(shù)據(jù)分析師成IT 界“大熊貓”。

隨著大數(shù)據(jù)在國內(nèi)的發(fā)展，大數(shù)據(jù)相關(guān)人才卻出現(xiàn)了供不應(yīng)求的狀況，大數(shù)據(jù)分析師更是被媒體稱為“未來較具發(fā)展?jié)摿Φ穆殬I(yè)之一”。大數(shù)據(jù)分析師是做什么的?阿里巴巴集團研究員薛貴榮就曾表示，“大數(shù)據(jù)分析師就是一群玩數(shù)據(jù)的人，玩出數(shù)據(jù)的商業(yè)價值，讓數(shù)據(jù)變成生產(chǎn)力?！倍髷?shù)據(jù)和傳統(tǒng)數(shù)據(jù)的較大區(qū)別在于，它是在線的、實時的、規(guī)模海量且形式不規(guī)整，無章法可循，因此“會玩”這些數(shù)據(jù)的人就很重要。