课程培训
决胜大数据时代:Hadoop&Yarn&Spark企业级最佳实践培训

 决胜大数据时代:Hadoop&Yarn&Spark企业级最佳实践培训课程

培训内容

第一部分

1Hadoop三问(彻底理解Hadoop

2Hadoop集群与管理(具备构建并驾驭Hadoop集群能力)

3彻底掌握HDFS(具备开发自己网盘的能力)

4彻底掌握HDFS(具备修改HDFS具体源码实现的能力)

第二部分

1彻底掌握MapReduce(从代码的角度剖析MapReduce执行的具体过程并具备开发MapReduce代码的能力)

2彻底掌握MapReduce(具备掌握Hadoop如何把HDFS文件转化为Key-Value让供Map调用的能力)

3彻底掌握MapReduce(具备掌握MapReduce内部运行和实现细节并改造MapReduce的能力)

4Hadoop集群高级实践(具体Hadoop企业管理员的实际能力)

第三部分

1实战ZooKeeper(具备理解并通过命令行和Java两种方式操作ZooKeeper的能力)

2实战HBase(具备掌握HBase企业级开发和管理的能力)

3实战Pig(具备掌握Pig企业级开发和管理的能力)

4实战Hive(具备掌握Hive企业级开发和管理的能力)

第四部分

1实战Sqoop(具备使用Sqoop自由转换传统关系型数据库和HDFS中数据的能力)

2实战Flume(具备使用Flume收集和管理分布式日志的能力)

3Hadoop系统管理进阶(具备掌握MapReduce内部运行和实现细节并改造MapReduce的能力)

4电信日志项目(具备掌握Hadoop完整项目的分析、开发、部署的全过程的能力)

5某知名电商公司Hadoop实施全程揭秘(具备掌握商业级别Hadoop的分析、开发、部署的全过程的能力)

第五部分

1YARN(具备理解和使用YARN的能力)

2Yarn资源调度器(具备理解和使用YARN的能力)

3ResourceManager深度剖析(具备深刻理解ResourceManager的能力)

4NodeManager深度剖析(具备掌握NodeManagerContainer的能力)

第六部分

1Spark的架构设计(具备掌握Spark架构的能力)

2Spark编程模型(具备掌握编程核心的能力)

3深入Spark内核(具备掌握Spark内核的能力)

4Spark的广播变量与累加器(具备掌握Spark广播和累加器的能力)

5Spark多语言编程(具备掌握多语言编程的能力)

6SparkContext解析和数据加载以及存储(具备掌握Spark加载以处理数据的能力)

第七部分

7深入实战RDD(具备掌握Spark RDD深入处理计算和优化计算的能力)

8Shark的原理和使用(具备掌握Shark用于数据分析统计的能力)

9Spark的机器学习(具备掌握Spark的机器学习的能力)

10Spark的图计算GraphX(具备掌握Spark图计算的能力)

11Spark SQL(具备掌握Spark SQL进行的能力)

第八部分

12Spark实时流处理(具备掌握Spark 实时流处理技术的能力)

13Spark程序的测试(具备掌握Spark程序测试的能力)

14Spark的优化(具备掌握Spark优化的能力)

15Spark on Yarn(具备掌握Spark on Yarn的能力)

16JobServer(具备掌握Spark as a cloud service的能力)

17Spark项目案例实战(具备掌握Spark项目进行数据处理的能力)

 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>