在线
询问

免费
试听

线上线下
随时学

会员
订阅

顶部

全部课程> Hadoop管理员培训课程 - 大数据技术提升路径

Hadoop管理员培训课程 - 大数据技术提升路径

  • 60课时(建议每周学习0小时)
  • 自主模式

已有3292人报名学习

  • 课程概览
  • 授课讲师
  • 课程大纲
  • 实验列表
    Hadoop管理员培训课程 - 大数据技术提升路径
  • 课程概览
  • 授课讲师
  • 课程大纲
  • 实验列表

Hadoop大数据管理员是一个关键角色,在大数据环境中负责维护、管理和优化Hadoop集群。Cloudera Manager 是 CDH 市场领先的管理平台。作为业界第一的端到端 Apache Hadoop 的管理应用

课程概览

一、课程简介

Cloudera Manager 设计的目的是为了使得对于企业数据中心的管 理变得简单和直观。通过 Cloudera Manager,可以方便地部署, 并且集中式的操作完整的大数据软件栈。该应用软件会自动化安 装过程,从而减少了部署集群的时间。通过 Cloudera Manager
可以提供一个集群范围内的节点实时运行状态视图。同时,还提 供了一个中央控制台,可以用于配置集群。不仅如此, Cloudera Manager 通过包含一系列的报道和诊断工具,可以帮助您优化集 群性能,并且提高利用率。 Cloudera Manager 能够为您提供以下 的功能 :
● 自动化 Hadoop 安装过程,大幅缩短部署时间;
● 提供实时的集群概况,例如节点、服务的运行状况;
● 提供了集中的中央控制台对集群的配置进行更改。
● 包含全面的报告和诊断工具,帮助优化性能和利用率。
二、课程目标
在本课程中,您将学习:

●  Hadoop核心技术的功能

●  如何Cloudera管理器简化Hadoop安装和管理

●   如何使用Cloudera管理器部署Hadoop集群

●   如何运行Yarn应用程序,包括如何使用sqoopflume从外部来源填充HDFS

●   如何规划Hadoop集群的硬件和软件

●  在安装HiveImpala

●  部署Hadoop客户端时应考虑哪些问题

●   如何配置HDFS以实现高可用性

●   在实现Hadoop安全性时应考虑哪些问题?

●   如何在集群上配置资源调度?

●   如何维护集群?

●   如何监视、故障排除和优化集群。

通过IT培训订阅制的灵活学习模式,涵盖在线直播互动、面授课程深度解析及海量视频订阅资源,全方位助力您的技能提升。

授课讲师

方老师

技术经验: 具有4年的后端开发经验,专注于构建高效、可维护的软件系统。 教学风格: 以细致、风趣和充满激情的授课方式著称,能够激发学生的学习兴趣和参与热情。 职业素养: 展现出强烈的责任心,致力于提供高质量的教学和指导,因此深受学生好评。 项目经验: 在项目开发方面拥有丰富的经验,曾负责多个关键项目,包括但不限于: 股票交易系统,涉及实时数据处理和用户交互设计。 教务管理系统,优化教育机构的行政流程和资源分配。 腾飞商城,一个综合性的电子商务平台,提供用户友好的购物体验。 库存管理系统,提高库存流转效率和准确性。 专业认可: 作为一位优秀讲师,不仅在技术传授上有所成就,更在教学方法和学生指导上获得了广泛认可。

课程大纲
  • 第1章课程概述
  •     第1节 Cloudera及其平台介绍
    视频名称:01-cloudera及其平台介绍
  •     第2节 CDH平台介绍
    视频名称:02-第一章 CDH平台演示
  • 第2章Hadoop介绍
  •     第1节 Hadoop简介
  • 第3章CDH平台介绍
  •     第1节 安装CDH介绍
  •     第2节 CDH环境及平台功能介绍
  • 第4章HDFS介绍
  •     第1节 HDFS特性
  •     第2节 编写与读取文件
  • 第5章MapReduceSpark on Yarn
  •     第1节 Yarn资源分配器
  •     第2节 MapReduce概念
  •     第3节 Spark概念
  •     第4节 Yarn概念+调度+日志
  • 第6章配置文件与进程日志
  •     第1节 配置文件与进程日志介绍
  • 第7章数据采集
  •     第1节 flume采集日志文件
  •     第2节 sqoop采集关系型数据库数据
  • 第8章Hadoop集群规划
  •     第1节 选择正确的硬件
  •     第2节 云部署
  • 第9章Hadoop常用组件
  •     第1节 Hive
  •     第2节 Impala
  • 第10章Hadoop客户端
  •     第1节 Pig+cloudera shearch
  •     第2节 客户端的安装与配置
  •     第3节 客户端HUE的安装与配置
  •     第4节 客户端Oozie工作流调度
  • 第11章Hadoop集群高级配置
  •     第1节 高级的配置
  •     第2节 端口与机架感知
  •     第3节 HA高可用
  • 第12章Hadoop安全
  •     第1节 数据安全介绍
  • 第13章资源管理
  •     第1节 静态的服务池+公平调度器
  •     第2节 配置动态资源库
  •     第3节 Yarn内存与CPU设置+Impala查询调度
  • 第14章集群维护
  •     第1节 检查HDFS状态与节点管理
  •     第2节 目录快照与集群升级
  • 第15章集群监控与故障处理
  •     第1节 cloudera管理器的监控
  •     第2节 监控Hadoop集群
  •     第3节 故障排查与常见错误
实验列表
节数上课时间星期一 星期二星期三星期四 星期五星期六星期天
第1节08:00 - 08:40
第2节09:00 - 09:40
第3节10:00 - 10:40
第4节11:00 - 11:40
第5节14:00 - 14:40
第6节15:00 - 15:40
第7节16:00 - 16:40
第8节17:00 - 17:40
天数上课日期上课时间内容
相关课件 更多
  • pdf

    Cloudera_Administrator培训教程

    大小:7.14MB

    2023-08-04

  • pdf

    cloudera CHD安装教程

    大小:1.7MB

    2023-08-04

  • pdf

    ClouderaManager运维_中文手册

    大小:2.61MB

    2023-08-04


课程名称:
Hadoop管理员培训课程 - 大数据技术提升路径
课程现价:
0
支付方式:
支付宝支付
微信支付
确认支付
支付剩余时间: 15:00
视频试听
购买课程
当前课程仅限高级会员学习!
成为会员
取消