知道美河 | 上传资料 | VIP申请 | 精品课程 | 资料搜索 | 问题反馈 | 会员手册 | 积分消费 | 积分充值 | 帐号保护

iloveyin 发表于 2019-7-22 22:12:36

Hadoop集群原理与运维实践

下载服务器:五号服务器---VIP资料下载七区\VIP专题教程二区
**** Hidden Message *****
Hadoop集群原理与运维实践 迅速帮你具备有运维hadoop的经验

课程简介
Hadoop已经成为目前大数据处理的事实标准,各大互联网公司均在用Hadoop来作为数据平台的重要组成部分。在小规模数据量场景下,并不关心Hadoop集群的规划与性能问题,能用即可。然而,随着业务的增长和数据量的增长,在上百台甚至上千上万台集群规模、上PB的数据量下,如何合理的规划和使用Hadoop集群、如何优化集群,发挥更高的效率,就显得尤为重要。

本课程将从Hadoop集群运维的角度着手,从零开始手把手规划、部署、安装、优化和管理集群,综合互联网一线大规模Hadoop集群运维的实践经验,更深入的剖析Hadoop集群原理,教授如何零基础构建更加高效、稳定、可扩展的大规模Hadoop集群。通过本课程的学习,有助于深入理解Hadoop原理,能够胜任PB级大规模Hadoop集群运维管理的工作。

课程大纲
第一课.      预备知识
1.1.      大数据与Hadoop
1.2.      Hadoop发展历程与现状
1.3.      Hadoop的基本组成与原理

第二课.   集群部署前的准备
2.1.   硬件选型
2.2.   网络规划
2.3.   操作系统选型与配置
2.4.   Hadoop版本选型

第三课.   从零开始安装部署Hadoop集群
3.1.   伪分布式模式
3.2.   分布式生产环境部署
3.3.   节点规划
3.4.   集群安装部署HDFS
3.5.   集群安装部署MRv2和YARN
3.6.   Hadoop集群benchmark

第四课.   开始使用Hadoop集群
4.1.   Hadoop命令手册解读
4.2.   HDFS使用与权限
4.3.   MapReduce Job开发、运行与管理
4.4.   YARN管理

第五课.   Hadoop集群性能优化
5.1.   集群常用配置文件解读
5.2.   HDFS配置优化
5.3.   MapReduce配置优化
5.4.   YARN配置优化

第六课.   HDFS高可用配置
6.1.   NameNode HA
6.2.   HDFS Federation

第七课.   YARN高可用配置
7.1.   ResourceManager HA
7.2.   NodeManager Recovery

第八课.   Hadoop安全模式与权限控制
8.1.   Hadoop安全模式原理与架构
8.2.   Kerberos原理与Hadoop应用
8.3.   权限控制

第九课.   Hadoop集群管理
9.1.   HDFS权限规划和Quota管理
9.2.   HDFS扩容与故障节点处理
9.3.   HDFS Balancer
9.4.   HDFS FSCK
9.5.   HDFS distcp
9.6.   YARN Scheduler配置管理
9.7.   YARN扩容与故障节点处理
9.8.   集群版本升级与回滚

第十课.   Hadoop其他组件安装配置与管理
10.1.   HBase安装配置管理
10.2.   Hive安装配置管理
10.3.   Pig安装配置管理
10.4.   Spark安装配置与管理

第十一课.   Hadoop集群监控方案
11.1.   JMX监控
11.2.   Ganglia监控
11.3.   Nagios/Zabbix监控

第十二课.   Hadoop新版本特性概述与展望
12.1.   HDFS集中式缓存
12.2.   HDFS分级存储
12.3.   YARN Node Label
12.4.   YARN Timeline Server
12.5.   YARN Docker执行器
12.6.   Hadoop 3.0展望



发这套是为了配合这个学习 华为大数据认证HCIA HCIP-Big Data Developer视频教程

andy210 发表于 2020-12-14 17:29:54

讲的很好,好厉害的!

liubx5201314 发表于 2021-6-22 10:56:25

知识储备。大数据必备

dowa 发表于 2021-9-1 12:39:02

有用,做运维很适合看,谢谢

CookieKen 发表于 2022-5-27 21:59:22

有用,做运维很适合看,谢谢

goalforth 发表于 2022-6-3 14:05:01

风格和突然翻滚如果

刘德华andy 发表于 2022-6-7 09:51:10

谢谢!

xwuchen 发表于 2022-8-2 13:09:36

学习了,谢谢

DragonSnake 发表于 2023-3-5 11:44:17

谢谢

kuailexiaod 发表于 2023-6-29 06:05:46

111111111111111

liyuwei2021 发表于 2023-6-29 08:17:50

ddddddddddddddddddd

libingchao1980 发表于 2024-1-6 22:21:13

工作中遇到,学习一下

wangck 发表于 2024-6-14 17:15:11


有用,做运维很适合看,谢谢

中尉 发表于 2024-7-4 15:41:22

学习一下

nq_ 发表于 2024-7-8 10:59:11

学习学习
页: [1]
查看完整版本: Hadoop集群原理与运维实践