课程培训
MapReduce2.0源码分析与编程实战培训课程

 MapReduce2.0源码分析与编程实战培训课程

课程大纲:

1章 大象也会跳舞

1.1 大数据时代 

1.2 大数据分析时代 

1.3 简单、粗暴、有效这就是Hadoop 

1.4 MapReduceHadoop 

1.5 看,大象也会跳舞 

2章 大象的肚子HDFS文件系统详解

2.1 HDFS基础详解 

2.2 HDFS数据存取流程分析 

2.3 HDFS命令行操作详解 

2.4 通过Web浏览HDFS文件 

2.5 HDFS接口使用详解 

2.6 HDFS文件同步与并发访问 

3章 “吃下去吐出来”Hadoop文件I/O系统详解

3.1 Hadoop的压缩类型介绍 

3.2 Hadoop的压缩类库 

3.3 I/O中序列化类型详解 

3.4 实现自定义的Writable类型 

3.5 Hadoop中小文件处理详解 

4章 “大象的大脑”MapReduce框架结构与源码分析

4.1 MapReduce框架结构与源码分析 

4.2 编程实战:经典的MapReduce单词计数程序 

5章 深入!MapReduce配置与测试

5.1 MapReduce环境变量配置详解 

5.2 使用MRUnitMapReduce进行测试 

5.3 在本地磁盘上进行MapReduce测试 

5.4 MapReduce计数器 

6章 大象的思考流程MapReduce运行流程详解

6.1 经典MapReduce任务的工作流程 

6.2 经典MapReduce任务异常处理详解 

6.3 经典MapReduce任务的数据处理过程 

6.4 MapReduce 2.0(YARN)工作流程详解 

7章 更强的大象MapReduce高级程序设计续

7.1 MapReduce程序设计默认格式类型详解 

7.2 InputFormat输入格式详解 

7.3 OutputFormat输出格式详解 

7.4 多种输入与输出使用介绍 

8章 MapReduce相关特性详解

8.1 MapReduce计数器 

8.2 排序与查找 

8.3 对输出结果的值分组排序 

8.4 编程实战:使用二次排序自动查找最小值 

9章 啤酒与尿布MapReduce连接与数据挖掘初步

9.1 对于同样格式数据进行MapReduce连接 

9.2 对于不同格式数据进行MapReduce连接 

9.3 不能说的秘密啤酒与尿布 

9.4 数据挖掘初步 

10章 MapReduce实战编程及深度分析

10.1 编程实战:自定义数据库中读取数据 

10.2 编程实战:串联寻找共同转载微博 

10.3 编程实战:云存储模型 

10.4 编程实战:多文档相似关键字检索 

10.5 编程实战:学生成绩整理与分组 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>