千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機(jī)構(gòu)
關(guān)注千鋒學(xué)習(xí)站小程序
隨時(shí)隨地免費(fèi)學(xué)習(xí)課程
在千鋒大數(shù)據(jù)培訓(xùn)學(xué)習(xí)至今,已經(jīng)有了比較基本的思維框架,大數(shù)據(jù)主要是通過(guò)對(duì)數(shù)據(jù)流進(jìn)行數(shù)據(jù)處理,然后進(jìn)行數(shù)據(jù)監(jiān)控協(xié)調(diào)。正是因?yàn)樵谇тh大數(shù)據(jù)培訓(xùn)的學(xué)習(xí)讓我對(duì)大數(shù)據(jù)產(chǎn)生了濃厚的興趣,隨著逐漸的深入學(xué)習(xí),我接觸到了很多大數(shù)據(jù)相關(guān)的知識(shí),對(duì)我來(lái)說(shuō)這是全新的,像開(kāi)辟了新大陸。
這個(gè)階段對(duì)我來(lái)說(shuō)只能算是有所了解,進(jìn)去到大數(shù)據(jù)的世界讓我很欣喜,每天都有新知識(shí),而我孜孜不倦的學(xué)習(xí),學(xué)的越多,越感到自己的不足,接著上個(gè)階段的java web階段,過(guò)渡到hadoop階段老師仔細(xì)的講述hadoop原理,讓我從底層原理了解hadoop,上手快,更加易學(xué)。
兩個(gè)月的學(xué)習(xí),已經(jīng)學(xué)至Hadoop階段。Hadoop是一種可靠的,可擴(kuò)展的分布式計(jì)算開(kāi)發(fā)軟件。Hadoop的軟件庫(kù)是一個(gè)框架,它允許使用簡(jiǎn)單的編程模型跨計(jì)算機(jī)集群分布式處理海量數(shù)據(jù)。
Hadoop的模塊可大致分為cluster,mapreduce,hdfs,yarn。mapreduce是一種分布式運(yùn)算的框架,可以幫助我們來(lái)實(shí)現(xiàn)一些分布式運(yùn)算,對(duì)數(shù)據(jù)進(jìn)行分析和處理。ddfs的作用是在存儲(chǔ)文件對(duì)大型文件進(jìn)行切塊,保存在服務(wù)器中的不同節(jié)點(diǎn),然后當(dāng)我們需要的時(shí)候來(lái)找到這些文件。搭建Hadoop的集群的時(shí)候要注意環(huán)境變量配置,著重的注意不要出現(xiàn)空格,中文,特殊符號(hào)。甚至連存儲(chǔ)路徑也盡量存放在全英文的路徑下,盡可能的不要因?yàn)檫@些事情犯錯(cuò)。
總而言之,在學(xué)習(xí)大數(shù)據(jù)的道路上我還有很多技能去熟練掌握,所以接下來(lái)的學(xué)習(xí)中,我將會(huì)繼續(xù)努力。
相關(guān)文章
了解千鋒動(dòng)態(tài)
關(guān)注千鋒教育服務(wù)號(hào)
掃一掃快速進(jìn)入
千鋒移動(dòng)端頁(yè)面
掃碼匿名提建議
直達(dá)CEO信箱