课程定位与适用人群 本课程面向后端开发方向,以 Java 为核心技术栈,深入讲解大数据处理生态。在多易教育的培训体系中,它对应「零基础大数据实战训练营」及「Java 大数据精英晋升」两个班型。课程由业内经验丰富的名师团队主讲,注重知识点的通俗化讲解与技术迭代更新,确保内容紧跟企业实际应用场景。适合具备 Java SE 基础或希望从传统后端转型大数据开发的开…
本课程面向后端开发方向,以 Java 为核心技术栈,深入讲解大数据处理生态。在多易教育的培训体系中,它对应「零基础大数据实战训练营」及「Java 大数据精英晋升」两个班型。课程由业内经验丰富的名师团队主讲,注重知识点的通俗化讲解与技术迭代更新,确保内容紧跟企业实际应用场景。适合具备 Java SE 基础或希望从传统后端转型大数据开发的开发者参考,尤其适合需要补齐 Hadoop、Spark 等主流组件实战能力的群体。入门门槛适中,要求学习者掌握基本的面向对象编程思想与 Linux 常用命令,无需预先具备分布式系统经验。
课程围绕大数据开发生态链展开,重点覆盖 Hadoop 分布式存储与计算框架、Spark 内存计算引擎、实时数据处理以及数仓建模等核心模块。内容强调「项目加强特训」,通过多个贴近企业生产环境的综合案例,帮助学员理解离线批处理与实时流处理的技术选型差异。课程结构注重可复用性,将分布式系统原理、数据管道构建、性能调优等通用能力拆解为独立知识点,便于学员对照源码进行模块化学习。教学过程中穿插大量实战代码与运维脚本,确保学员不仅能看懂原理,更能独立完成集群搭建、任务开发与故障排查。每个模块均配有可运行的工程源码,方便对照练习。
建议按「基础环境配置→Hadoop 核心组件→Spark 计算模型→综合项目实战」的顺序推进。对于已有 Java 后端经验的开发者,可优先跳过语言基础部分,直接进入大数据生态组件的学习,重点关注工程化项目源码,对照文档理解数据流转逻辑与代码结构。学习过程中应充分配合资料包中的实战项目代码,边看讲解边动手编写,避免仅被动观看视频。资料包适合作为对照实践的参考手册,而非单纯的知识输入渠道。建议学完每个阶段后,自行复现项目核心功能,以检验知识掌握程度。完成全部模块后,学员应能独立搭建小型大数据平台、开发数据处理任务,并具备参与企业级数据项目开发的基础能力,能够产出可落地的数据处理代码与部署方案。
多易教育教学团队成立多年来深知学生基础不同、工作需求不同对于学习的课程也会有所区别。目前开设班型:零基础大数据实战训练营、java大数据精英晋升、项目加强特训营。专注大数据开发培训,拥有涛哥、星哥、行哥、辉哥等一众业内名师,在大数据培训领域,受到广泛推崇,课程迭代更新速度快,老师讲授通俗易懂,综合项目无限贴近实战,教学实力业内一流。
eagle.png (113.9 KB, 下载次数: 0) 2023-4-19 22:13 上传 课程介绍: 多易教育教学团队成立多年来深知学生基础不同、工作需求不同对于学习的课程也会有所区别。目前开设班型:零基础大数据实战训练营、java大数据精英晋升、项目加强特训营。专注大数据开发培训,拥有涛哥、星哥、行哥、辉哥等一众业内名师,在大数据培训领域,受到广泛推崇,课程迭代更新速度快,老师讲授通俗易懂,综合项目无限贴近实战,教学实力业内一流。 课程目录: 代码文档资料 实时项目-day01 实时项目-day02 实时项目-day03 实时项目-day04 实时项目-day05 实时项目-day06 实时项目-day07 实时项目-day08 001项目日志采集架构.mp4 221.72M 002Nginx的按照和使用.mp4 215.95M 003Nginx-Kafka插件安装-1.mp4 27.41M 004Nginx-Kafka插件安装-2.mp4 325.12M 005Nginx-Kafka插件测试.mp4 71.34M 006OpenResty的介绍和安装.mp4 152.83M 007OpenResty的安装2.mp4 49.02M 008OpenResty的基本配置.mp4 162.95M 009OpenResty编写lua脚本1.mp4 76.22M 010OpenResty编写lua脚本2.mp4 159.88M 011Flink通用工具类编写.mp4 392.14M 012项目需求.mp4 277.41M 013数据预处理.mp4 155.33M 014实时统计新老用户.mp4 200.70M 015按照区域维度统计新老用户.mp4 376.89M 016用户去重思路和案例.mp4 260.89M 017使用布隆过滤器去重.mp4 201.29M 018使用布隆过滤器计算新老用户.mp4 387.21M 019计算新用户优化.mp4 276.56M 020优化使用RockDB作为StateBackend.mp4 102.99M 021clickhouse回顾.mp4 189.80M 022clickhouse建表思路.mp4 284.66M 023使用clickhouse进行用户多维度查询.mp4 73.40M 024自定义Kafka反序列器生成唯一ID.mp4 247.97M 025使用JdbcSink将数据写入clickhouse.mp4 284.98M 026clickhouse数据入库.mp4 665.76M 027观看直播人数统计需求.mp4 48.37M 028观看直播人数统计实现.mp4 517.05M 029直播人气值计算-1.mp4 310.19M 030直播人气值计算-2.mp4 152.34M 031写入clickhouse问题解决.mp4 45.14M 032观看直播人数统计优化方案.mp4 68.60M 033观看直播人数统计优化实现.mp4 327.35M 034观看直播人数统计结果保存.mp4 206.37M 035观看直播人数统计结果保存.mp4.mp4 311.75M 036观看直播人数总结.mp4 37.82M 037打赏礼物需求分析.mp4 193.86M 038打赏礼物代码实现.mp4 754.46M 039热门商品TopN需求分析.mp4 196.44M 040热门商品TopN代码实现1.mp4 347.49M 041热门商品TopN代码实现2.mp4 386.31M 042业务库数据采集流程.mp4 261.57M 043Canal的安装和配置.mp4 424.29M 044Canal使用TCP编程发送数据.mp4 174.86M 045业务库介绍.mp4 369.46M 046业务数据导入到Kafka.mp4 496.73M 047Canal问题解决和数据预处理.mp4 136.90M 048订单表双流join和数据延迟问题.mp4 454.89M 049修改源码解决双流join迟到数据.mp4 967.78M 050热门商品问题补充.mp4 111.45M 051订单双流join回顾.mp4 159.70M 052拼图需求分析.mp4 300.45M 053拼团三流join实现.mp4 553.32M 054项目总结.mp4 333.03M 055flinksql的使用-1.mp4 271.77M 056flinksql的使用-2.mp4 158.53M 057flinksql的使用-3.mp4 242.10M 058flinksql的使用-4.mp4 104.20M 059flinksql的使用-5.mp4 91.29M 060flinksql的使用-6.mp4 198.59M 061flinksql的使用-7.mp4 135.72M 062flinksql的使用-8.mp4 410.16M 063Flink结合Drools是动态查询ClickHouse测试.mp4 235.54M 064动态规则原理讲解.mp4 122.45M 065Drools的入门案例.mp4 195.50M 066Flink结合Drools案例1.mp4 295.70M 067将Drools规则代码保存到MySQL中.mp4 229.50M 068统计广播State实时获取Drools规则数据.mp4 260.62M 069Drool结合Flink的动态规则测试.mp4 262.56M 070Drools动态调用查询Service.mp4 361.35M 071Drools动态调用ClickHouse查询服务.mp4 387.87M