课程培训
金融行业流式处理框架培训

主题

内容见要

海量数据处理系统
的实时流式处理架构设计

海量数据高并发实时处理的系统场景

非事务型的实时流式数据

海量数据高并发的实时流式处理数据架构解决方案

实时流式处理处理的架构汇总

高容量,高并发, 高性能, 高可用,廉价IT投入的非功能性需求实现

8种海量数据处理的架构设计与实时流式处理的整合与集成解决方案

分布式系统架构的实时流式处理核心设计

实时流式处理的架构分析与框架差异

实时流式计算的应用场景及关键技术

实时流式计算的适用业务场景

关键技术(从系统架构,数据传输,编程接口,高可用,维护成本,其他关键技术维度阐述)

常见实时流式计算系统简介(Flink, Spark等)

Flink与Spark Streaming实时流式处理框架差异

优缺点分析

实时数据标准

数据标准化在数据治理中的意义

实时数据标准定义,标准单词析取

数据标准域,标准用语

数据标准管理规范

数据标准建设模型,过程

服务总线对数据标准的意义

结合产品实现数据标准

数据标准在数据架构中得地位和作用

数据质量

控制数据质量的方法

数据质量管理模型

数据知识库

利用知识库对数据进行清洗,匹配

自动化进行数据质量控制的方法

数据质量产品介绍

数据质量在数据架构中得实现方法和价值使用场景

数据安全

数据安全管理范围

数据安全管理流程

数据共享策略

数据安全技术架构

数据安全生命周期管理

数据安全产品和数据安全方法

数据安全在数据架构中得使用(多租户、资源隔离等)

数据模型

概念模型设计

逻辑模型设计

物理模型设计

数据仓库主题域模型设计

多维模型设计

实时数据模型

数据仓库分层设计

数据生命周期

数据生命周期管理及意义

数据生命周期管理体系

识别数据分类和相对应的生命周期管理

数据冷热温转化

数据价值评分

数据生命周期管理对于数据架构得实际使用场景和方法

元数据

元数据的定义

元数据的使用场景

元数据的分类

元数据梳理方法

元数据管理流程和方法

元数据管理内容

元数据国际标准

元数据管理架构

元数据在数据架构中地位和使用场景

主数据

主数据的定义

主数据识别方法

主数据模型

主数据管理规范

一般主数据系统功能和技术架构

主数据建设方法论

主数据和其他系统集成方法

主数据在数据架构中得实际使用场景

流批一体化架构

flink流批一体的分层架构

flink流批一体DataStream

flink流批一体DAG Scheduler

flink流批一体的Shuffle架构

flink流批一体的容错策略

案例

一个典型银行实时风控大数据实时流式处理案例实践:
具备掌握Flink/Kafka大数据实时流式处理/异步消息队列 应用系统的完整 架构设计,
具备项目的分析、开发、部署的全过程的能力,
贯穿前面课程的主要内容,使大家熟悉一个完整实时流式、异步消息队列处理额大数据项目的分析、架构设计、开发、部署的全过程

 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>