课程培训
企业大数据培训课程

大数据培训课程1

 

课程目标:

 

通过该课程的学习,能够对大数据技术基础、HadoopHBaseHiveSparkFlinkKafkaFlume原理及使用有深入的了解,对企业数据平台建设、开发、运维以及集群的稳定运行有很大的帮助。

 

课程大纲:

 

主题

内容

 

 

 

 

 

大数据技术基础&分布式文件系统&分布式资源调度系统

大数据背景知识、发展历程介绍

大数据平台架构层次设计

HDFS核心概念、应用场景介绍以及体系结构详解

HDFS高可用的原理介绍,共享存储、active/standby详解

HDFS常用命令实战演示,数据文件、数据块监控介绍

NameNode核心元数据fsimage/editlog原理介绍

DataNode职责介绍、数据块物理存储结构介绍

YARN体系结构详解

ResourceManager原理解析

NodeManager原理解析

容量调度器和公平调度器详解

资源两阶段申请详细流程详细

MapReduce代码实例演示

 

 

 

 

 

Hive&Spark&Flink

计算引擎

Hive 数据库//分区实战

Hive元数据库介绍、演示

HIve高级函数实战

Spark体系结构原理解析

Spark常用算子程序演示

Spark On YARN运行实践

Flink应用场景介绍,与Spark区别详解

Flink StandaloneON YARN运行模式与区别详解

Flink常用算子实战

Kafka+Flink代码实战演示

Flink精确一次性语义原理介绍

Flink Checkpoint应用长以及原理介绍

 

 

 

HBase体系结构与工作原理

HBase多模生态介绍

HBase体系结构详解

HBase高并发原理、读写流程详解

HBase数据模型详解、实战演示

HBase元数据存储详解

HBase读写表/过滤器/计数器代码实战

HBase数据热点产生原因以及预分区实战

 

 

 

Flume/Kafka原理以及使用

 

Flume+Kafka在企业数据平台的应用场景

Flume高可用体系结构原理介绍

Flume Source/Channel/Sink组件详解、实战
Flume自定义拦截器、选择器实战

Flume高可用采集系统设计

Kafka体系结构原理介绍

Kafka生产者、消费者代码实战演示

Kafka消费者组、TOPIC、分区、偏移量offset关系剖析

 

 

 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>