一、课程介绍
● HCNA-BigData认证定位于大数据技术普及,FusionInsightHD的规划设计、部署实施、运维管理能力的构建、考核和认证。包括但不仅限于:FusionInsightHD解决方案架构、设计、部署和维护,大数据常用组件技术原理、设计、部署、管理与维护(包括HBase,Hive,Loader,MR,YARN,HDFS,Spark,Flume,Solr,Hue,Kafka,Kerberos,Oozie,Zookeeper,Streaming)。
● 通过HCNA-BigData认证,将证明您系统理解大数据架构、技术原理,掌握华为大数据FusionInsightHD方案,具备大数据平台的规划设计、部署和运维管理能力,胜任大数据平台管理员工作岗位。意味着企业掌握了运用大数据技术、产品规划并建设大数据平台的系统性能力,并具备大数据平台管理和日常运维能力。
二、课程目标
● 了解大数据产生与发展、大数据概念与Hadoop、大数据行业应用、大数据架构与价值。
● 掌握HDFS架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握MR/YARN架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握ZooKeeper架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Spark架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Kerberos架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握HBase架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Hive架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Loader架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Flume架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Solr架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Kafka架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Oozie架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Streaming架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握Hue架构原理和功能、安装部署规划和方法、参数配置、常见交付问题处理方法和日常维护方法
● 掌握华为大数据解决方案产品FusinInsight架构原理、功能特性
● 了解FusionInsightHD的安装部署约束条件、集群评估
● 掌握FusionInsightHD组网规划、节点规划、磁盘规划、安装部署流程和安装过程、系统参数的配置以及常见问题处理方法、产品维护工具的使用方法、系统升级方法和补丁安装方法
三、课程大纲
1.大数据行业与技术趋势
● 大数据产生与发展
● 大数据概念与Hadoop简介
● 大数据与云计算管理
● 大数据生态系统
● 大数据行业应用
● 大数据架构与价值
2.HDFS分布式文件系统技术
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
3.MR和YARN分布式计算引擎技术
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
4.Spark基于内容的分布式计算技术
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
5.Kerberos&Ldap技术及应用
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
6.Hbase分布式数据库
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
7.Hive数据仓库工具
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
8.Loader数据转换
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
9.Flume海量日志聚合
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
10.Solr数据搜索
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
11.Kafka订阅消息系统
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
12.Oozie工作流引擎
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
13.Zookeeper集群分布式锁设施
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
14.Streaming数据传送技术
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
15.Hue图形化管理
● 组件功能介绍
● 数据架构
● 部署规划
● 部署方法
● 参数配置(含监控告警配置)
● 日常维护(进程、日志、目录、故障恢复方法、应急业务恢复)
● 常见交付维护案例或问题
16.FusionInsightHD解决方案介绍
● FusionInsight架构
● FusionInsight组件和特性
● 典型案例
17.FusionInsightHD规划设计
● 部署约束
● 集群评估举例
● 组网规划
● 节点规划
● 磁盘规划
● 案例分享
● 常见交付维护案例或问题
18.FusionInsightHD安装部署
● 基本概念
● 安装流程
● 安装前准备
● 安装过程
● 安装后检查
● 系统配置
● 常见问题处理
19.FusionInsightHD日常维护
● 功能介绍
● 维护工具
● 日常维护操作
● 升级和补丁