欢迎光临若泽数据,专注于大数据领域的高薪人才培养!

大数据线下精英班

课程安排

项目实战一:某互联网基于Spark为核心的数据平台实战

  • 整体架构
  • 数据采集
  • 数据存储
  • 数据处理
  • 数据统计
  • 数据管理
  • 数据质量
  • 高可靠性
  • 动态处理
  • 框架封装
  • 周边功能

项目实战二:某电商行业基于HBase的实时数仓

  • 项目需求:基于Hive的离线数仓和业务需求出发
  • 整体架构: 实时数仓架构设计及保证链路高可靠
  • 数据采集: 全量和增量调度刷新数据同步
  • 数据处理: 如何保证Spark实时消费数据零丢失及两种生产场景的消费数据参数选型
  • 数据存储: 基于HBase存储
  • 数据管理: 元数据如何设计
  • 痛点功能: 开发MCP新特性及二期设计
  • 其他功能:

a.整体架构的调优点各种姿势剖析;

b.整条链路timezone引发的血案及如何解决;

d.生产中各种故障案例深度分析;

e.如何保证数据延时,链路精准切换,零丢失数据;

f.解决Spark长服务时内存泄露,最终被kill;

项目实战三:老学员公司项目分享一

项目实战四:老学员公司项目分享二

补充说明:

  • 我们绝不教demo日志进行pv、uv等的统计分析,我们使用的就是真实生产环境中的日志信息来进行真实场景的各种维度的统计分析,进而达到举一反三的作用
  • 拒绝纯理论、拒绝念PPT,优化前后的效果以生产环境运行结果来说话,拒绝”理论优化”
  • QQ技术交流群:707635769  课程咨询(星星):1952249535