在來千鋒大數(shù)據(jù)培訓學習之前,自己對于大數(shù)據(jù)的概念還很模糊,對于大數(shù)據(jù)和云計算的差別還是很不清楚,可是經(jīng)過一段時間的學習,讓我對大數(shù)據(jù)技術有了相對清晰的了解,下面與大家共同分享一下自己在千鋒大數(shù)據(jù)學到的相關知識。
第一,大數(shù)據(jù)主要側重于數(shù)據(jù)的處理,流數(shù)據(jù)、批量數(shù)據(jù)、圖計算等。在數(shù)據(jù)處理過程中,批量的數(shù)據(jù)處理的代表工具是Hadoop,流數(shù)據(jù)的數(shù)據(jù)處理代表的是Storm技術。
第二,無論是Hadoop還是Spark的架構原理都側重于分為三部分:資源的管理、服務計算狀態(tài)的監(jiān)控、服務的運行。把數(shù)據(jù)處理、數(shù)據(jù)處理監(jiān)控和資源管理分開,可以更容易地進行分布式系統(tǒng)的擴展。
第三,主要從數(shù)據(jù)的存儲、數(shù)據(jù)的處理和數(shù)據(jù)的應用三個方面進行介紹,每一個方面結合現(xiàn)在的熱門工具進行實情實景的分析。
其實,大數(shù)據(jù)這門課程的核心內容是Hadoop。這些天來,新的知識點非常多,學習的方式也和之前的Java階段有所區(qū)別。代碼的比重顯著降低,我們絕大多數(shù)時間是用來在虛擬機上操作配置Hadoop生態(tài)圈組件,這個過程十分麻煩,但也十分重要。作為未來公司里的數(shù)據(jù)處理者,將這些工具的操作方式熟記于心是最基本的要求,所以哪怕平日里搭建環(huán)境時出現(xiàn)再多的異常,我們都必須耐心仔細地回看,爭取獨立找出錯誤。
除了Hadoop,大數(shù)據(jù)方面還有非常非常多的知識點需要去學習,正所謂學海無涯,或許說的就是大數(shù)據(jù)技術的學習,所以我必須要有終身學習的決心,這樣才會有更大的成就。
相關文章
了解千鋒動態(tài)
關注千鋒教育服務號
掃一掃快速進入
千鋒移動端頁面
掃碼匿名提建議
直達CEO信箱