在线客服
扫描二维码
下载博学谷APP
扫描二维码
关注博学谷微信公众号
Hadoop简称HDFS,它具有高容错性的特点,并且适合那些有着超大数据集的应用程序。Hadoop中的分布式计算框架,使的分布式编程更简单,能够很好的处理存储在hdfs上的海量数据。因此如果大家要入门学习大数据,Hadoop是必须掌握的内容。下面我们一起来看看大数据hadoop入门课程大纲:

第一章 Apache Hadoop简介
Hadoop介绍
Hadoop发展简史
Hadoop特性优点&国内外应用
第二章 Apache Hadoop—集群搭建
集群搭建--发行版本&集群简介
集群搭建--服务器环境准备
集群搭建--JDK环境安装
集群搭建--安装包目录结构
集群搭建--配置文件修改上
集群搭建--配置文件修改下
集群搭建--配置文件注意事项
集群搭建--namenode格式化
集群搭建--启动方式
集群搭建--集群ui&初体验
第三章 Apache Hadoop—HDFS
HDFS--介绍&模拟实现思路
HDFS--设计目标
HDFS--重要特性
HDFS--shell客户端
HDFS--shell常用命令介绍
HDFS基本原理--NameNode概述
HDFS基本原理--DataNode概述
HDFS工作机制--概述
HDFS工作机制--写数据流程--上
HDFS工作机制--写数据流程--下
HDFS工作机制--读数据流程
HDFS应用开发--JAVA api环境&对象
HDFS应用开发--创建目录&客户端身份设置
HDFS应用开发--下载文件&本地hadoop环境配置
HDFS应用开发--其他api&Stream操作
案例:shell定时采集数据至hdfs--需求分析
案例:shell定时采集数据至hdfs--实现
第四章 Hadoop MapReduce
理解MapReduce思想
MapReduce计算模拟实现思路
MapReduce设计构思
MapReduce框架结构&编程规范
WordCount案例--Mapper编写:mr数据类型
WordCount案例--Mapper编写:map方法
WordCount案例--Reducer编写:类型确定&如何调用
WordCount案例--Reducer编写:reduce方法编程
WordCount案例--运行主类Job编程
程序运行模型--集群运行模式
程序运行模型--本地运行模式
MapReduce的输入和输出
第五章 MapReduce数据分区&分区规则及编程案例
理解MapReduce思想
MapReduce计算模拟实现思路
MapReduce设计构思
MapReduce框架结构&编程规范
WordCount案例--Mapper编写:mr数据类型
WordCount案例--Mapper编写:map方法
WordCount案例--Reducer编写:类型确定&如何调用
WordCount案例--Reducer编写:reduce方法编程
WordCount案例--运行主类Job编程
程序运行模型--集群运行模式
程序运行模型--本地运行模式
MapReduce的输入和输出
第六章 Apache Flume概述及案例讲解
概述&运行机制
安装部署&netcat-logger
案例--采集目录至HDFS
案例--spooldir使用注意事项
案例--采集文件至HDFS
高级功能--load balance
高级功能--failover
实战案例--采集日志汇总&拦截器使用
扩展了解--自定义拦截器思路
完成了大数据hadoop入门课程大纲的学习,大家可以在快速了解hadoop的同时,学会hadoop集群中的文件存储功能.分布式编程框架,还能了解离线大数据处理的基本流程。如果大家对课程感兴趣,还等什么,现在就来体验相关免费课程吧~
— 申请免费试学名额 —
在职想转行提升,担心学不会?根据个人情况规划学习路线,闯关式自适应学习模式保证学习效果
讲师一对一辅导,在线答疑解惑,指导就业!
相关推荐 更多
线上的数据分析培训课程怎么样?数据分析学什么?
线上的数据分析培训课程怎么样?博学谷线上数据分析课程还不错,目前发展前景也比较大,大数据分析师是玩数据的人,对数据分析总结可以创造出商业价值让数据提高生产力。目前数据分析师的需求量增大,就算你不是数据分析师,但掌握数据分析技能也是必备工作技能之一。
10477
2019-09-25 17:18:37
大数据培训班要学习多长时间?
大数据培训班要学习多长时间?相信这是许多同学在报名大数据培训班时,都十分关心的问题。一般来讲,对于没有脱产学习条件的人来讲,零基础线上培训班的学习时间在4~6个月,学完之后,大家就能游刃有余地从事大数据相关工作,掌握大数据的核心技术轻松拿到满意的工作offer。下面介绍一下大数据培训班的具体学习内容,大家可以根据自身情况,合理安排学习时间和进度。
6718
2019-12-30 11:54:16
大数据和人工智能有什么关系?
大数据和人工智能关注点不同,但有密切联系。人工智能需要大量的数据作为思考和决策的基础;大数据需要人工智能技术进行数据价值化操作。在大数据价值的两个主要体现当中,数据应用主要渠道之一就是人工智能产品,为智能体提供的数据量越大,智能体运行的效果就会越好,智能体通常需要大量的数据进行训练和验证,保障运行可靠性和稳定性。
18246
2020-04-27 15:44:25
零基础怎样学习大数据?
目前,我们身处在一个信息化的时代,无论是生活还是工作,我们每天都能接触到成千上万的大量信息。而大数据技术正是在这样的背景中应用而生的,通过大数据技术我们可以快速获取有价值的信息,并以此来支撑各种决策。总的来讲,大数据技术是二十一世纪的最有价值的技术之一,掌握了它我们在各个行业都能大展拳脚。那么,零基础怎样学习大数据?下面一起来看看吧~
6075
2020-05-06 10:23:17
小白入门大数据行业需要了解什么?
在这个人人都知道大数据的时代,大数据到底是什么,却依旧鲜有人能说清楚。本文主要为了帮助对大数据一无所知的小白,整理了入门大数据必须了解的基础知识,内容大概包括了大数据的起源发展、大数据技术的概念、大数据行业的职业规划以及大数据的未来趋势,下面一起来看看吧~
6021
2020-06-19 15:28:46
