课程培训
Doris实时数仓架构与应用实战培训课程

Doris实时数仓架构与应用实战培训课程

  •  

  • 培训对象: 数据仓库工程师、实时数仓开发者、大数据平台架构师、数据分析工程师。

  •  

  • 培训目标:

    • 理解Doris的MPP架构和核心特性。

    • 掌握Doris的表模型(Unique、Aggregate、Duplicate)选择。

    • 能够进行数据导入和实时更新操作。

    • 具备Doris查询优化和集群运维能力。

  •  

  • 培训内容介绍:

  •  

    一、 Doris架构与设计理念: 了解Doris的MPP(大规模并行处理)架构,对比与ClickHouse、Druid的差异。

    二、 Doris安装部署: 单节点快速部署,配置FE和BE节点,了解集群扩缩容操作。

    三、 数据模型深入: 对比Duplicate Key、Unique Key、Aggregate Key三种数据模型的适用场景。

    四、 表结构设计与分区: 设计分区分桶策略,选择合适的分区字段和分桶字段,优化数据分布。

    五、 数据导入方式: 使用Stream Load进行实时导入,Broker Load批量导入HDFS/S3数据,Routine Load消费Kafka。

    六、 实时数据更新: 使用Unique模型实现数据更新,了解标记删除和合并策略。

    七、 Doris SQL查询: 掌握标准SQL查询语法,使用窗口函数进行复杂分析。

    八、 物化视图与预聚合: 创建物化视图自动维护预计算结果,加速常用查询。

    九、 Rollup表与查询改写: 创建Rollup调整维度顺序,理解查询自动改写匹配最优Rollup。

    十、 Colocation Join优化: 使用Colocation Join避免数据Shuffle,提升多表Join性能。

    十一、 查询分析与优化: 分析Profile信息,识别查询瓶颈,调整Join顺序和并行度。

    十二、 实战项目:实时数仓构建: 基于Doris构建实时数据仓库,实现从数据接入、模型设计到报表展示的全流程。





如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>