如果要問(wèn)最近幾年，IT行業(yè)哪個(gè)技術(shù)方向最火？一定屬于ABC，即AI + Big Data + Cloud，也就是人工智能、大數(shù)據(jù)和云計(jì)算。

我們處在一個(gè)大數(shù)據(jù)時(shí)代，不管是社交網(wǎng)絡(luò)、物聯(lián)網(wǎng)還是移動(dòng)互聯(lián)網(wǎng)和智慧城市，都要與大數(shù)據(jù)搭上聯(lián)系。

[[360821]]

大數(shù)據(jù)就是數(shù)據(jù)量多嗎？其實(shí)并不是，我們通過(guò)Hadoop其中的各個(gè)組件就可以了解到,大數(shù)據(jù)并不只是數(shù)據(jù)量大而已，它是數(shù)據(jù)存儲(chǔ)+分布式調(diào)度+數(shù)據(jù)分析的結(jié)合：

✔ 數(shù)據(jù)存儲(chǔ) : Hadoop-HDFS — 用戶高可靠性的來(lái)存儲(chǔ)原始數(shù)據(jù)

✔ 分布式調(diào)度 : Hadoop-YARN — 用戶分布式任務(wù)調(diào)度管理分配任務(wù)

✔ 數(shù)據(jù)分析 : Hadoop-MapReduce — 任務(wù)處理分析引擎

還記得之前的“網(wǎng)抑云”事件嗎？大數(shù)據(jù)挖掘用戶心理需求，推你所愛。大數(shù)據(jù)會(huì)根據(jù)歌詞關(guān)鍵字、作者、風(fēng)格、年代等歸類統(tǒng)計(jì)后，推斷出相似的歌曲，根據(jù)已有的算法，編寫相應(yīng)的Java程序，在Hadoop上跑job去處理數(shù)據(jù)，得到的結(jié)果再存入數(shù)據(jù)庫(kù)，最后推送到用戶的手機(jī)端，即推薦的“你可能喜歡”，使用該產(chǎn)品的用戶那么多，數(shù)據(jù)量可想而知，大數(shù)據(jù)可以存放原來(lái)不敢想的數(shù)據(jù)，比如大量的請(qǐng)求日志，而且還能在其中進(jìn)行分析，舉幾個(gè)例子來(lái)看：

有多少人每天中午吃中餐外賣?

購(gòu)買衣服用戶購(gòu)買最多的顏色和尺碼是什么?

上海那個(gè)地方的人流量最多最適合投放廣告?

上面的每一個(gè)結(jié)果都需要通過(guò)大量的數(shù)據(jù)來(lái)分析出來(lái),大數(shù)據(jù)就是起到這個(gè)作用最終來(lái)實(shí)現(xiàn)數(shù)據(jù)價(jià)值就是大數(shù)據(jù)的最終目標(biāo)!

大數(shù)據(jù)技術(shù)是未來(lái)科技的必備技能，在外行看來(lái)大數(shù)據(jù)就是噱頭，華而不實(shí)，對(duì)于大數(shù)據(jù)技術(shù)來(lái)說(shuō)“先是看不見，再是看不上，最后是跟不上”。做技術(shù)的一定要跟上時(shí)代，做精當(dāng)下，看見未來(lái)！

我們打開任何一個(gè)招聘的軟件可以看到，具有相同技術(shù)經(jīng)驗(yàn)的大數(shù)據(jù)開發(fā)人員薪資頗高，已經(jīng)成為互聯(lián)網(wǎng)行業(yè)的香餑餑。而國(guó)家也出臺(tái)各種大數(shù)據(jù)戰(zhàn)略，這些都是我們投身大數(shù)據(jù)的原因。

有人說(shuō)大數(shù)據(jù)不是已經(jīng)很多年了嗎? 現(xiàn)在在來(lái)說(shuō)大數(shù)據(jù)是不是太晚了?

我覺(jué)得這個(gè)時(shí)間一點(diǎn)也不晚，馬云說(shuō)未來(lái)10年是大數(shù)據(jù)和人工智能的十年，尤其經(jīng)過(guò)的一段時(shí)間的發(fā)展完善，之前少數(shù)人能夠使用的大數(shù)據(jù)已經(jīng)變得更加大眾化了擁有了自己的生態(tài)，讓使用者入門成本大幅降低，讓普通開發(fā)者和小企業(yè)也可以能夠比較輕松的接入到自己的業(yè)務(wù)中。

那么學(xué)習(xí)大數(shù)據(jù)需要掌握什么語(yǔ)言基礎(chǔ)？

Java基礎(chǔ)。目前大數(shù)據(jù)框架90%以上都是使用Java開發(fā)語(yǔ)言，所以如果要學(xué)習(xí)大數(shù)據(jù)技術(shù)，首先要掌握J(rèn)ava基礎(chǔ)語(yǔ)法以及JavaEE方向的相關(guān)知識(shí)。

MySQL數(shù)據(jù)庫(kù)。這是學(xué)習(xí)大數(shù)據(jù)必須掌握的知識(shí)之一。數(shù)據(jù)的操作語(yǔ)言是SQL，因此很多工具的開發(fā)目標(biāo)就是能夠在Hadoop上使用SQL。

Linux系統(tǒng)。大數(shù)據(jù)的框架都是安裝在Linux操作系統(tǒng)上，因此熟練掌握Linux相關(guān)知識(shí)也是學(xué)習(xí)大數(shù)據(jù)的基礎(chǔ)知識(shí)。

真正的大數(shù)據(jù)的學(xué)習(xí)不能僅僅停留在理論的層面上，大數(shù)據(jù)的方向的切入是全方位的，基礎(chǔ)語(yǔ)言的學(xué)習(xí)只是很小的一個(gè)方面，編程落實(shí)到最后到編程思想，有了指導(dǎo)思想學(xué)習(xí)起來(lái)就能方便很多。

這幾年，隨著互聯(lián)網(wǎng)大潮走向低谷，同時(shí)傳統(tǒng)企業(yè)紛紛進(jìn)行數(shù)字化轉(zhuǎn)型，基本各個(gè)公司都在考慮如何進(jìn)一步挖掘數(shù)據(jù)價(jià)值，提高企業(yè)的運(yùn)營(yíng)效率。在這種趨勢(shì)下，大數(shù)據(jù)技術(shù)越來(lái)越重要。所以說(shuō)，未來(lái)大數(shù)據(jù)是我們打工人的必備技能之一。