- 课程概览
- 授课讲师
- 课程大纲
- 实验列表
- 课程概览
- 授课讲师
- 课程大纲
- 实验列表
Hadoop大数据管理员是一个关键角色,在大数据环境中负责维护、管理和优化Hadoop集群。Cloudera Manager 是 CDH 市场领先的管理平台。作为业界第一的端到端 Apache Hadoop 的管理应用
课程概览
一、课程简介
二、课程目标
在本课程中,您将学习:
● Hadoop核心技术的功能
● 如何Cloudera管理器简化Hadoop安装和管理
● 如何使用Cloudera管理器部署Hadoop集群
● 如何运行Yarn应用程序,包括如何使用sqoop和flume从外部来源填充HDFS
● 如何规划Hadoop集群的硬件和软件
● 在安装Hive和Impala
● 部署Hadoop客户端时应考虑哪些问题
● 如何配置HDFS以实现高可用性
● 在实现Hadoop安全性时应考虑哪些问题?
● 如何在集群上配置资源调度?
● 如何维护集群?
● 如何监视、故障排除和优化集群。
通过IT培训订阅制的灵活学习模式,涵盖在线直播互动、面授课程深度解析及海量视频订阅资源,全方位助力您的技能提升。
授课讲师
![](https://www.borimooc.com/itmoocPic/teacherInfo/2023-10/32017_1698748140883.jpg)
技术经验: 具有4年的后端开发经验,专注于构建高效、可维护的软件系统。 教学风格: 以细致、风趣和充满激情的授课方式著称,能够激发学生的学习兴趣和参与热情。 职业素养: 展现出强烈的责任心,致力于提供高质量的教学和指导,因此深受学生好评。 项目经验: 在项目开发方面拥有丰富的经验,曾负责多个关键项目,包括但不限于: 股票交易系统,涉及实时数据处理和用户交互设计。 教务管理系统,优化教育机构的行政流程和资源分配。 腾飞商城,一个综合性的电子商务平台,提供用户友好的购物体验。 库存管理系统,提高库存流转效率和准确性。 专业认可: 作为一位优秀讲师,不仅在技术传授上有所成就,更在教学方法和学生指导上获得了广泛认可。
课程大纲
- 第1章课程概述
-
    第1节 Cloudera及其平台介绍
-
    第2节 CDH平台介绍
- 第2章Hadoop介绍
-
    第1节 Hadoop简介
- 第3章CDH平台介绍
-
    第1节 安装CDH介绍
-
    第2节 CDH环境及平台功能介绍
- 第4章HDFS介绍
-
    第1节 HDFS特性
-
    第2节 编写与读取文件
- 第5章MapReduceSpark on Yarn
-
    第1节 Yarn资源分配器
-
    第2节 MapReduce概念
-
    第3节 Spark概念
-
    第4节 Yarn概念+调度+日志
- 第6章配置文件与进程日志
-
    第1节 配置文件与进程日志介绍
- 第7章数据采集
-
    第1节 flume采集日志文件
-
    第2节 sqoop采集关系型数据库数据
- 第8章Hadoop集群规划
-
    第1节 选择正确的硬件
-
    第2节 云部署
- 第9章Hadoop常用组件
-
    第1节 Hive
-
    第2节 Impala
- 第10章Hadoop客户端
-
    第1节 Pig+cloudera shearch
-
    第2节 客户端的安装与配置
-
    第3节 客户端HUE的安装与配置
-
    第4节 客户端Oozie工作流调度
- 第11章Hadoop集群高级配置
-
    第1节 高级的配置
-
    第2节 端口与机架感知
-
    第3节 HA高可用
- 第12章Hadoop安全
-
    第1节 数据安全介绍
- 第13章资源管理
-
    第1节 静态的服务池+公平调度器
-
    第2节 配置动态资源库
-
    第3节 Yarn内存与CPU设置+Impala查询调度
- 第14章集群维护
-
    第1节 检查HDFS状态与节点管理
-
    第2节 目录快照与集群升级
- 第15章集群监控与故障处理
-
    第1节 cloudera管理器的监控
-
    第2节 监控Hadoop集群
-
    第3节 故障排查与常见错误
实验列表
节数 | 上课时间 | 星期一 | 星期二 | 星期三 | 星期四 | 星期五 | 星期六 | 星期天 |
---|---|---|---|---|---|---|---|---|
第1节 | 08:00 - 08:40 | |||||||
第2节 | 09:00 - 09:40 | |||||||
第3节 | 10:00 - 10:40 | |||||||
第4节 | 11:00 - 11:40 | |||||||
第5节 | 14:00 - 14:40 | |||||||
第6节 | 15:00 - 15:40 | |||||||
第7节 | 16:00 - 16:40 | |||||||
第8节 | 17:00 - 17:40 |
天数 | 上课日期 | 上课时间 | 内容 |
---|
相关课件 更多
-
pdf
Cloudera_Administrator培训教程
大小:7.14MB
2023-08-04
-
pdf
cloudera CHD安装教程
大小:1.7MB
2023-08-04
-
pdf
ClouderaManager运维_中文手册
大小:2.61MB
2023-08-04