在移動互聯(lián)高速發(fā)展的今天,企業(yè)需要處理的數(shù)據(jù)量驚人的龐大,有這樣一句話,人類文明伊始至今,所有的藏書數(shù)據(jù)量加在一起是1TB左右,而在中國,某一些超大型企業(yè)每天所產(chǎn)生的數(shù)據(jù)量就會超過20TB,而累積至今,企業(yè)所要處理的歷史數(shù)據(jù)量則高達幾十到幾百PB,PB是TB的下一級單位,1024T為一個PB,如此巨大的數(shù)據(jù)量用傳統(tǒng)的數(shù)據(jù)分析軟件或者是簡單的數(shù)據(jù)分析程序不能夠進行很有效的數(shù)據(jù)分析,大數(shù)據(jù)程序開發(fā)因此誕生。
如今重視數(shù)據(jù)的機構(gòu)已經(jīng)越來越多,上到國防部,下到互聯(lián)網(wǎng)創(chuàng)業(yè)公司、金融機構(gòu)需要通過大數(shù)據(jù)項目來做創(chuàng)新驅(qū)動,需要數(shù)據(jù)分析或處理崗位也很多;常見的食品制造、零售電商、醫(yī)療制造、交通檢測等也需要數(shù)據(jù)分析與處理,如優(yōu)化庫存,降低成本,預測需求等。
對于想要學習大數(shù)據(jù)的小伙伴,就目前來看。就業(yè)情況是非常好的,近期千鋒大數(shù)據(jù)培訓班畢業(yè)的學生,平均薪資都在15K左右,而且人手至少能拿到兩個公司的OFFER。
綜合各大企業(yè)的人才需求,千鋒老師做了一個小調(diào)查,主要是對以下三大類專業(yè)技術(shù)人才需求頗豐。分別是:大數(shù)據(jù)系統(tǒng)研發(fā)類、大數(shù)據(jù)應用開發(fā)類、大數(shù)據(jù)分析類,其中的熱門崗位有:
1、大數(shù)據(jù)系統(tǒng)架構(gòu)師
大數(shù)據(jù)平臺搭建、系統(tǒng)設計、基礎設施。
技能:計算機體系結(jié)構(gòu)、網(wǎng)絡架構(gòu)、編程范式、文件系統(tǒng)、分布并行處理等。
2、大數(shù)據(jù)系統(tǒng)分析師
面向?qū)嶋H行業(yè)領域,利用大數(shù)據(jù)技術(shù)進行數(shù)據(jù)安全生命周期管理、分析和應用。
技能:人工智能、機器學習、數(shù)理統(tǒng)計、矩陣計算、優(yōu)化方法。
3、hadoop開發(fā)工程師。
解決大數(shù)據(jù)存儲問題。
4、數(shù)據(jù)分析師
不同行業(yè)中,專門從事行業(yè)數(shù)據(jù)搜集、整理、分析,并依據(jù)數(shù)據(jù)做出行業(yè)研究、評估和預測的專業(yè)人員。在工作中通過運用工具,提取、分析、呈現(xiàn)數(shù)據(jù),實現(xiàn)數(shù)據(jù)的商業(yè)意義。
技能:需要熟練SPSS、STATISTIC、Eviews、SAS等數(shù)據(jù)分析軟件中的一門,至少能用Acess等進行數(shù)據(jù)庫開發(fā),至少掌握一門數(shù)學軟件如matalab、mathmatics進行新模型的構(gòu)建,至少掌握一門編程語言。
5、數(shù)據(jù)挖掘工程師
做數(shù)據(jù)挖掘要從海量數(shù)據(jù)中發(fā)現(xiàn)規(guī)律,這就需要一定的數(shù)學知識,基本的比如線性代數(shù)、高等代數(shù)、凸優(yōu)化、概率論等。經(jīng)常會用到的語言包括Python、Java、C或者C++,我自己用Python或者Java比較多。有時用MapReduce寫程序,再用Hadoop或者Hyp來處理數(shù)據(jù),如果用Python的話會和Spark相結(jié)合。
總之:目前大數(shù)據(jù)就業(yè)前景是非常好的,對于我們來說,更重要的是要學到真正的大數(shù)據(jù)技術(shù),在高技術(shù)面前,工作機會將蜂擁而至!