hdfs編程實踐的步驟(Java轉大數(shù)據(jù)的學習線路是什么)
Java轉大數(shù)據(jù)的學習線路是什么?
專業(yè)軟件開發(fā),在學校為主Java,現(xiàn)在Java開發(fā)工作1年多.想轉大數(shù)據(jù)
1.先把linux環(huán)境搞熟,大數(shù)據(jù)很多技術是布署在linux服務器的,能熟練在用vi編輯文本
2.動手布署hadoop,把hdfs,MapReduce騎得
3.重新部署zookeeper
4.作戰(zhàn)部署hbase,了解列式存儲的表設計方法
5.掌握hive的使用
6.sparkstreaming,storm流式可以計算
7.學習學習sparkmllib,python為數(shù)據(jù)分析做準備
有Java基礎半路轉行大數(shù)據(jù),必須怎么學習:
1、大數(shù)據(jù)基礎:Linux、Maven:Linux功能管理、Shell編程設計、Maven布署/配置/倉庫、MavenPOM
2、HDFS分布式文件系統(tǒng)
3、MapReduce分布式計算模型Yarn分布式資源管理器Zookeeper分布式協(xié)調服務
4、Hbase分布式數(shù)據(jù)庫Hive分布式數(shù)據(jù)倉庫
5、FlumeNG分布式數(shù)據(jù)采集系統(tǒng)Sqoop大數(shù)據(jù)遷移系統(tǒng)
6、Scala大數(shù)據(jù)黃金語言kafka分布式總線系統(tǒng)
7、SparkCore大數(shù)據(jù)計算基石SparkSQL數(shù)據(jù)挖掘利器SparkStreaming流式計算平臺
8、SparkMllib機器學習平臺SparkGraphx圖計算平臺
9、項目實戰(zhàn)
相關:
大數(shù)據(jù)開發(fā)工程師,所學習的知識是什么的
大數(shù)據(jù)自學誤區(qū)有哪些?大數(shù)據(jù)開發(fā)和數(shù)據(jù)分析怎么避免學誤區(qū)?
、大數(shù)據(jù)基礎:Linux、Maven:Linux功能管理、Shell編程設計、Maven作戰(zhàn)部署/配置/倉庫、MavenPOM
本站部分文章來自網(wǎng)絡或用戶投稿。涉及到的言論觀點不代表本站立場。閱讀前請查看【免責聲明】發(fā)布者:方應,如若本篇文章侵犯了原著者的合法權益,可聯(lián)系我們進行處理。本文鏈接:http://www.gdyuanyu.cn/tougao/66716.html