在來千鋒大數據培訓學習之前,自己對于大數據的概念還很模糊,對于大數據和云計算的差別還是很不清楚,可是經過一段時間的學習,讓我對大數據技術有了相對清晰的了解,下面與大家共同分享一下自己在千鋒大數據學到的相關知識。
第一,大數據主要側重于數據的處理,流數據、批量數據、圖計算等。在數據處理過程中,批量的數據處理的代表工具是Hadoop,流數據的數據處理代表的是Storm技術。
第二,無論是Hadoop還是Spark的架構原理都側重于分為三部分:資源的管理、服務計算狀態的監控、服務的運行。把數據處理、數據處理監控和資源管理分開,可以更容易地進行分布式系統的擴展。
第三,主要從數據的存儲、數據的處理和數據的應用三個方面進行介紹,每一個方面結合現在的熱門工具進行實情實景的分析。
其實,大數據這門課程的核心內容是Hadoop。這些天來,新的知識點非常多,學習的方式也和之前的Java階段有所區別。代碼的比重顯著降低,我們絕大多數時間是用來在虛擬機上操作配置Hadoop生態圈組件,這個過程十分麻煩,但也十分重要。作為未來公司里的數據處理者,將這些工具的操作方式熟記于心是最基本的要求,所以哪怕平日里搭建環境時出現再多的異常,我們都必須耐心仔細地回看,爭取獨立找出錯誤。
除了Hadoop,大數據方面還有非常非常多的知識點需要去學習,正所謂學海無涯,或許說的就是大數據技術的學習,所以我必須要有終身學習的決心,這樣才會有更大的成就。
相關文章
了解千鋒動態
關注千鋒教育服務號
掃一掃快速進入
千鋒移動端頁面
掃碼匿名提建議
直達CEO信箱