hdfs编程实践的步骤(Java转大数据的学习线路是什么)

卡卡

作者

Java转大数据的学习线路是什么？

专业软件开发,在学校为主Java,现在Java开发工作1年多.想转大数据

1.先把linux环境搞熟，大数据很多技术是布署在linux服务器的，能熟练在用vi编辑文本

2.动手布署hadoop，把hdfs，MapReduce骑得

3.重新部署zookeeper

4.作战部署hbase，了解列式存储的表设计方法

5.掌握hive的使用

6.sparkstreaming，storm流式可以计算

7.学习学习sparkmllib,python为数据分析做准备

有Java基础半路转行大数据，必须怎么学习：

1、大数据基础：Linux、Maven：Linux功能管理、Shell编程设计、Maven布署/配置/仓库、MavenPOM

2、HDFS分布式文件系统

3、MapReduce分布式计算模型Yarn分布式资源管理器Zookeeper分布式协调服务

4、Hbase分布式数据库Hive分布式数据仓库

5、FlumeNG分布式数据采集系统Sqoop大数据迁移系统

6、Scala大数据黄金语言kafka分布式总线系统

7、SparkCore大数据计算基石SparkSQL数据挖掘利器SparkStreaming流式计算平台

8、SparkMllib机器学习平台SparkGraphx图计算平台

9、项目实战

本站已关闭游客评论，请登录或者注册后再评论吧~