首页 星云 工具 资源 星选 资讯 热门工具
:

PDF转图片 完全免费 小红书视频下载 无水印 抖音视频下载 无水印 数字星空

Hadoop集群程序设计与开发PPT.rar

大数据 27.97MB 17 需要积分: 1
立即下载

资源介绍:

Hadoop集群程序设计与开发PPT.rar
Hadoop 集群程序设计与开发》教学
大纲
课程名称:Hadoop 集群程序设计与开发
课程类别:必修
适用专业:大数据技术类相关专业
总学时:64 学时
总学分:4.0 学分
一、课程的性质
本课程是为大数据技术类相关专业学生开设的课程。大数据技术蓬勃发展,基于开源技
术的 Hadoop 行业中应广泛Hadoop 开源免费、社活跃,框架具分布式存储和
算的核心功能,并且有企业成功的案例(如如淘宝、百度等)。本课程首先通过企业项目发
展历程介绍了大数据与云计算的概念并将 Hadoop 在这二个领域中的作用与地位进行阐述。
通过 Hadoop 源码片断与理论及实操结合的模式介 Hadoop 分布式存储框架 HDFS 与分布
式计算框架 MapReduce 的用法。对于 HDFS 不能很好支持小条目读取的缺陷,引入 HBase
框架进行应用说明。对于 MapReduce 框架对于项目专业人员的技能要求门槛高,复杂业务
开发周期较长的问题引入了 Hive 框架进行应用说明。Hadoop HBase Hive 结合进行项
目中大数据的存取与统计计算在企业中的运用越来越广泛,学习 Hadoop 框架已然是进入大
数据行业所必不可少的一步。
二、课程的任务
通过程的,使 Hadoop 有一的理课程主要
Hadoop 基本原理与架构、集群安装配置、HDFS 应用、HDFS I/O 操作、MapReduce 工作原
理与应用编程、HBase 基本应用、Hive 基本应用,关键知识点配置 Hadoop 源码片断和实操
案例进行辅助。涉及的知识点简要精到,实践操作性强。
三、教学内容及学时安排
章节名称
主要内容
教学目标
学时
1
初识 Hadoop
1. 为什么要学习 Hadoop
2. Hadoop 与云计算的关系
3. Hadoop 与大数据的关系
4. 学习 Hadoop 需要具备哪
些知识基础
5. 学习 Hadoop 需要的实验
环境什么样
6. 学习完 Hadoop 能做什么
1. 了解 Hadoop 产生过程、应
用场景
2. 理解云计算、大数据概念及
Hadoop 与它们的关系
3. 了解 Hadoop 学习过程及目
Hadoop 人才需求情况
4
2
Hadoop
1. Hadoop 简介
2. Hadoop
3. HDFS(分布式文件系统)
工作原理
4. MapReduce
算框架)工作原理
5. YARN(资源管理系统)
工作原理
6. 容错机制
7. 安全性
1. 了解 Hadoop 版本衍化情况
及生态系统的特点
2. 掌握 Hadoop 版本原理衍化
过程
3. 掌握 HDFSMapReduce
YARN 工作原理
4
3
Hadoop
境配置与搭建
1. 集群部署
2. 本地/独立模式搭建
3. Hadoop 伪分布模式搭建
4. 完全分布式搭建
5. Hadoop
Eclipse 开发环境搭建
1. 掌握集群部署的要点
2. 掌握 Hadoop 集群配置的流
程及内容
3. Hadoop
Eclipse 开发环境的建立过程
8
4
Hadoop
文件系统HDFS
1. HDFS 流操作
2. HDFS
概述
3. 通过 Web HDFS
4. HDFS API
1. 理解 HDFS 流的操作过程
2. 掌握常用 HDFS 命令
3. HDFS Java API
写法
4
5
Hadoop I/O
1. 压缩
2. I/O 序列化类型
3. 基于文件的数据结构
1. 掌握压缩类型的正确应用
2. Writable
应用
3. Writable
的实现与应用
4. SequenceFile
应用
6

资源文件列表:

Hadoop集群程序设计与开发PPT.rar.zip 大约有5个文件
  1. Hadoop集群程序设计与开发PPT.rar.rar 7.35MB
  2. Hadoop集群程序设计与开发教材最终代码(1).zip 2.99MB
  3. Hadoop集群程序设计与开发教学大纲.doc 70KB
  4. Hadoop集群程序设计与开发教学进度.doc 57KB
  5. 大数据基础PPT.zip.zip 17.6MB
0评论
提交 加载更多评论
其他资源 2024样本ES Time Sheet and Expense Application Form
1)标题:[Need Approval]_ZHANG SONGLIN Work Time Table _2024_Jul(月份需每月更改) 填写内容:Form 2024/6/24~2024/7/19(每月表格中的起始日期和终止日期) Total Hours: 160(一天8小时) Work Hours: 160 timesheet attachment included     余策之 | Software System Engineer @ Corning MT&E Asia Outsourcing Company BEIJING JIUZE TECHNOLOGY CO LTD Mobile: 填写本人手机即可 zhangs49@corning.com(填写康宁工作邮箱)) | www.9zekeji.com
基于mplayer的小的媒体播放器
有许多bug,仅供参考,不建议使用 基于Mplayer的视频播放器 1.需求分析: 1.该程序能够加载指定路径下所有的音视频文件 (.mp3 .mp4 .avi .rm .rmvb .flv .wma) 2.能够通过界面操作视频播放器 支持: 上键 下键 回车 ESC 支持: 焦点定位 1.一级页面功能如下: +-------------------+ | 视频播放器 | |-------------------| |1.查看播放列表 | |2.开始/暂停 | |3.停止 | |4.上一个 | |5.下一个 | |6.快进 | |7.定位 | |8.播放方式 | |9.退出 | +-------------------+
基于mplayer的小的媒体播放器 基于mplayer的小的媒体播放器
linux fio磁盘性能测试工具
linux fio磁盘性能测试工具
iOS统计图(包括柱状图、饼图等)
iOS统计图(包括柱状图、饼图等)
iOS统计图(包括柱状图、饼图等) iOS统计图(包括柱状图、饼图等) iOS统计图(包括柱状图、饼图等)
QT设置回调函数给python调用-参数法
QT中设置回调函数给python调用——参数法
font-fingerprint-defender
font-fingerprint-defender
webgpu-fingerprint-defender
webgpu-fingerprint-defender
all-fingerprint-defender
all-fingerprint-defender