Hadoop高级培训课程大纲-开发者版

网友投稿 260 2022-11-20

Hadoop高级培训课程大纲-开发者版

一、课程概述

本次培训课程主要面向大数据系统管理人员和开发设计人员,基于开源社区大数据应用最活跃的Hadoop和HBase技术框架,围绕分布式文件存储(HDFS)、分布式并行计算(Map/Recue)和非关系型数据库(NoSql)三个大数据核心应用展开,旨在帮助培训对象建立起完整的大数据理论基础框架和实践操作能力。主要课程内容包括:

1.大数据应用发展史;

2.分布式文件系统HDFS原理与架构、HDFS系统管理、HDFS开发与设计;

3.分布式并行计算框架Map/Reduce工作原理与架构、Map/Reduce任务运行监控、Map/Reduce任务调度、Map/Redcue开发与设计;

4.非关系型数据库HBase逻辑架构、HBase物理存储、HBase关键流程和算法、HBase开发与设计;

5.大数据应用案例分析:金融、电信、互联网、电商平台

二、课程大纲


日程



课程模块



课程内容



第1天



大数据概述



什么是大数据?



Hadoop概要



Hadoop生态系统介绍



Hadoop集群安装与部署



Hadoop独立部署



Hadoop伪分布式安装部署



Hadoop集群安装与部署



Hadoop配置参数管理



第2天



HDFS架构与原理



HDFS体系结构



HDFS读写过程-串行写与并行读



HDFS 管理接口-HDFS shell && HDFS Web Interface



HDFS开发与设计



HDFS API接口介绍



HDFS Java接口实例



HDFS开发实例-基于HDFS实现云盘系统



第3天



Map/Reduce架构与原理



Map/Reduce体系结构



Map/Reduce管理接口-Map/Reduce shell && Map/Reduce Web Interface



Map/Reduce开发与设计



Map/Reduce API接口介绍



Map/Reduce Java开发实例



第4天



HBASE架构与原理



HBASE体系结构



HBASE物理存储



HBASE关键流程算法



HBASE管理接口-HBase Shell&& HBase Web Interface



HBASE与RDBMS的比较



HBASE开发与设计



HBASE API接口介绍



HBASE Java接口实例



HBASE优化专题-海量数据写入优化



第5天



Hadoop辅助支持工具



Hive-提供给SQL程序员最好的礼物



Pig-通过脚本实现Map/Reduce



Sqoop-Hadoop时代的ETL


三、服务支持

Hadoop培训交流群:293503507

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:在嵌入式Linux操作系统中完成USB设备驱动设计
下一篇:Hadoop文件系统支持释疑之S3
相关文章

 发表评论

暂时没有评论,来抢沙发吧~