课程介绍

《玩转热门框架，用企业级思维开发通用够硬的大数据平台》是一门针对开发人员和数据工程师的课程，旨在教授如何使用热门框架和企业级思维开发通用且可扩展的大数据平台。

这门课程将涵盖以下内容：

1. 大数据平台概述：课程将首先介绍大数据平台的概念、特点和重要性。学员将了解大数据平台的基本组成部分以及其在企业中的应用场景。
2. 热门框架介绍：课程将深入介绍当前热门的大数据框架，如Hadoop、Spark、Kafka等。学员将学习这些框架的基本原理、核心功能和使用方法。
3. 企业级思维：在开发大数据平台时，良好的企业级思维非常重要。课程将教授如何考虑平台的可扩展性、稳定性、安全性和易用性等方面。学员将学习如何设计和构建一个具有企业级水平的大数据平台。
4. 平台开发实践：课程将通过实际案例和实践项目来帮助学员应用所学知识。学员将学习如何使用热门框架和企业级思维来开发通用够硬的大数据平台。
5. 最佳实践和案例分析：课程将分享一些成功的大数据平台案例和最佳实践。学员将从这些案例中学习到一些实际应用的经验和技巧。

通过学习这门课程，学员将掌握使用热门框架和企业级思维开发通用够硬的大数据平台的技能。这将使他们在当前的大数据行业中具备竞争力，并能够为企业构建高效、可靠的大数据解决方案。

课程目录

/【imooc-417】玩转热门框架 用企业级思维 开发通用够硬的大数据平台/
│├─第1章 课程导学与学习指南
│├─第2章 认识企业中的大数据平台
│├─第3章 大数据平台 —— 数据仓库之离线&实时
│├─第4章 大数据平台——数据仓库之权限管理
│├─第5章 大数据平台 —— 调度系统
│├─第6章 大数据平台 —— 计算引擎
│├─第7章 大数据平台建设 —— SQL查询引擎
│├─第8章 大数据平台建设 —— 监控预警
│├─第9章 大数据平台建设 —— 管理整合、任务定制
│├─第10章 系统集成及可视化
│├─课程资料

详细目录

第1章 课程导学与学习指南/
│├─1-1 导学【课程背景、项目速览】.ev4.mp4 90MB
│├─1-2 怎么更好的使用慕课平台.png 30.9MB
│├─1-3 你真的会问问题吗？.png 17.7MB
第2章 认识企业中的大数据平台/
│├─2-1 课程简介与学习建议.ev4.mp4 26.1MB
│├─2-2 什么是大数据平台.ev4.mp4 21.8MB
│├─2-3 为什么要建设大数据平台【三个解决、两个提升】.ev4.mp4 20.5MB
│├─2-4 大数据平台常用技术栈有哪些【知识体系梳理、我们要用哪些】.ev4.mp4 21.6MB
│├─2-5 各大企业大数据平台对比【作业：画出我们的平台架构和这些对比一下】.ev4.mp4 36.1MB
第3章 大数据平台 —— 数据仓库之离线&实时/
│├─3-1 数据仓库VS数据库.ev4.mp4 40MB
│├─3-10 Hive存储结构 ORCFile.ev4.mp4 42.1MB
│├─3-11 【梳理】Hive知识梳理总结.png 11.1MB
│├─3-12 Hive常见面试题.ev4.mp4 29.6MB
│├─3-13 离线数仓VS实时数仓.ev4.mp4 19.3MB
│├─3-14 图解Lambda架构数据流程.ev4.mp4 55.4MB
│├─3-15 Kappa 架构 VS Lambda.ev4.mp4 15.7MB
│├─3-16 主流大公司的实时数仓架构.ev4.mp4 18.2MB
│├─3-2 数据仓库分层建设.ev4.mp4 27.4MB
│├─3-3 Hive是什么【上期思考揭秘：分层的弊端，如何解决】.ev4.mp4 20.2MB
│├─3-4 Hive安装部署【课下任务：预习Hive和Mysql的区别，Hive都有哪些表？】.ev4.mp4.mp4 145MB
│├─3-5 【实操手册】Hive安装部署.png 16.2MB
│├─3-6 Hive基本使用（上）Hive数据类型 分区 基础语法.ev4.mp4 100.9MB
│├─3-7 Hive基本使用（中）内部表 外部表 分区表 分桶表.ev4.mp4 133.4MB
│├─3-8 Hive基本使用（下）内置函数 自定义函数 实现UDF.ev4.mp4 88.5MB
│├─3-9 【作业解答】Hive自定义函数注册.png 7.7MB
第4章 大数据平台——数据仓库之权限管理/
│├─4-1 权限管理（上）Hadoop Hive自带权限控制.ev4.mp4 18.4MB
│├─4-10 数据采集介绍【图解数据采集流程】.ev4.mp4 17.8MB
│├─4-11 常用数据采集工具【图解Sqoop、Flume、DataX】.ev4.mp4 38.1MB
│├─4-13 Datax数据采集实战.ev4.mp4 290.3MB
│├─4-14 【作业解答】Datax完成数据的导入导出.png 15.1MB
│├─4-15 数据治理简介【要解决的问题、元数据、数据血缘】.ev4.mp4 22.5MB
│├─4-16 Apache Atlas数据治理【图解Atlas架构】.ev4.mp4 26.2MB
│├─4-17 数据仓库常见面试题.ev4.mp4 24.2MB
│├─4-2 权限管理（下）实操Hive的权限操作.ev4.mp4 183.9MB
│├─4-3 Kerberos认证简介【对称 非对称加密、数字证书、图解Kerberos流程】mp4.mp4 32.3MB
│├─4-4 Apache Ranger简介【图解Ranger架构、Ranger管理HDFS、Hive、Yarn举例】ev4.mp4.mp4 27.4MB
│├─4-5 Apache Rangr安装.ev4.mp4 100.8MB
│├─4-6 Ranger HDFS Plugin安装.ev4.mp4 126.2MB
│├─4-7 Ranger Hive Plugin安装.ev4.mp4 83.2MB
│├─4-8 【实操手册】Apache Ranger安装部署.png 39.6MB
│├─4-9 Ranger Api Java开发之User管理.ev4.mp4 381.5MB
第5章 大数据平台 —— 调度系统/
│├─5-1 我们需要一个调度系统【任务处理现状、调度系统通用功能】.ev4.mp4 25.1MB
│├─5-10 调度系统相关面试指导.ev4.mp4 18.7MB
│├─5-2 Azkaban介绍【常用开源调度框架对比】.ev4.mp4 20.1MB
│├─5-3 Azkaban架构与调度流程【图解核心交互流程】.ev4.mp4 26.6MB
│├─5-4 Azkaban安装部署.ev4.mp4 169MB
│├─5-5 提交Azkaban任务.ev4.mp4 96.5MB
│├─5-6 【实操手册】Azkaban安装部署及基础使用.png 33.9MB
│├─5-7 Azkaban用户代理.ev4.mp4 80.7MB
│├─5-8 Java程序操作Azkaban Api (上).ev4.mp4 243.2MB
│├─5-9 Java程序操作Azkaban Api（下）.ev4.mp4 186.6MB
第6章 大数据平台 —— 计算引擎/
│├─6-1 Spark简介【Hadoop VS Spark、图解Spark生态】.ev4.mp4 35.4MB
│├─6-10 Spark 自定义UDF开发.ev4.mp4 79MB
│├─6-11 Spark程序开发原则与基础优化【常见调优策略、持久化级别】.ev4.mp4 93.8MB
│├─6-12 Spark 数据倾斜调优.ev4.mp4 79.1MB
│├─6-13 【拓展】Zeppelin安装与使用.png 33.8MB
│├─6-14 Spark面试题答疑.ev4.mp4 43.9MB
│├─6-2 Spark架构及执行流程【根据图解了解Spark名词】.ev4.mp4 44.6MB
│├─6-3 RDD简介及特性【图解WordCount示例中RDD如何转换】.ev4.mp4 32.6MB
│├─6-4 RDD依赖关系【图解Stage划分】.ev4.mp4 27.1MB
│├─6-5 Spark三种部署模式实战.ev4.mp4 309.2MB
│├─6-6 【实操手册】Spark三种部署模式及基本操作.png 23.6MB
│├─6-7 Spark程序开发.ev4.mp4 296.2MB
│├─6-8 SparkSQL简介【RDD VS DataFrame】.ev4.mp4 28.2MB
│├─6-9 SparkSQL程序开发.ev4.mp4 219.4MB
第7章 大数据平台建设 —— SQL查询引擎/
│├─7-1 大数据查询引擎Presto简介【作业：了解其他的SQL on Hadoop方案】.mp4 42MB
│├─7-10 Presto章节小结.ev4.mp4 34.7MB
│├─7-2 Presto架构与执行流程.ev4.mp4 49.5MB
│├─7-3 Presto安装部署.ev4.mp4 167.1MB
│├─7-4 通过Jdbc操作Presto.ev4.mp4 191.9MB
│├─7-5 Presto UDF开发（上）.ev4.mp4 178.2MB
│├─7-6 Presto UDF开发（下）.ev4.mp4 129.2MB
│├─7-7 Presto EventListener开发.ev4.mp4 307.1MB
│├─7-8 【拓展总结】Presto on Yarn.png 27.1MB
│├─7-9 Presto配置优化.ev4.mp4 55.8MB
第8章 大数据平台建设 —— 监控预警/
│├─8-1 监控系统介绍.ev4.mp4 19.4MB
│├─8-10 Push数据脚本开发.ev4.mp4 63.8MB
│├─8-11 【实操手册】Grafana安装并使用OpenFalcon数据源.png 12.2MB
│├─8-12 Grafana监控大盘配置.ev4.mp4 145.1MB
│├─8-13 监控系统 章节小结.ev4.mp4 29.9MB
│├─8-2 常用开源监控项目对比【Zabbix VS OpenFalcon VS Prometheus】.ev4.mp4 59.4MB
│├─8-3 OpenFalcon各个组件介绍.ev4.mp4 29.7MB
│├─8-4 OpenFalcon单机版部署.ev4.mp4 281.9MB
│├─8-5 【实操手册】OpenFalcon 安装部署.png 9.7MB
│├─8-6 OpenFalcon基本使用.ev4.mp4 120MB
│├─8-7 OpenFalcon邮件网关安装.ev4.mp4 83.2MB
│├─8-8 实现OpenFalcon对Hadoop服务状态报警.ev4.mp4 53.6MB
│├─8-9 自定义Plugin开发.ev4.mp4 190.4MB
第9章 大数据平台建设 —— 管理整合、任务定制/
│├─9-1 Naga数据平台介绍.ev4.mp4 45.6MB
│├─9-10 任务管理模块介绍.ev4.mp4 97.7MB
│├─9-11 插件抽象及解析代码开发.ev4.mp4 286.8MB
│├─9-12 插件接口及测试.ev4.mp4 180.1MB
│├─9-13 任务流程实体类开发.ev4.mp4 22.5MB
│├─9-14 创建流程及提交流程开发.ev4.mp4 255.2MB
│├─9-15 【实操手册】生成azkaban job文件.png 21.2MB
│├─9-16 插件参数及变量介绍.ev4.mp4 38.9MB
│├─9-17 引用参数解析方法开发.ev4.mp4 196.3MB
│├─9-18 插件SDK模块开发.ev4.mp4 234.9MB
│├─9-19 Java插件开发示例.ev4.mp4 149.6MB
│├─9-2 Naga大数据平台功能介绍.ev4.mp4 114.9MB
│├─9-20 Spark插件开发示例.ev4.mp4 79.7MB
│├─9-21 【实操手册】Naga Plugin Python SDK开发.png 18.9MB
│├─9-3 Naga 开发工具及基本类介绍.ev4.mp4 290.9MB
│├─9-4 集群概览模块实体类开发.ev4.mp4 433.8MB
│├─9-5 集群概览模块核心功能开发.ev4.mp4 334.1MB
│├─9-6 集群概览接口开发及测试.ev4.mp4 131.6MB
│├─9-7 业务线Entity开发.ev4.mp4 237.1MB
│├─9-8 Hadoop及Hive Client开发.ev4.mp4 328.9MB
│├─9-9 业务线Controller开发.ev4.mp4 211.5MB
第10章 系统集成及可视化/
│├─10-1 数据查询架构介绍.ev4.mp4 17.4MB
│├─10-10 可视化接口开发及测试.ev4.mp4 82.4MB
│├─10-11 Naga平台用户模型介绍.ev4.mp4 17.8MB
│├─10-12 用户登录认证功能.ev4.mp4 209.6MB
│├─10-13 用户权限认证功能.ev4.mp4 113.5MB
│├─10-14 审计日志功能.ev4.mp4 148.9MB
│├─10-15 【拓展总结】 Naga大数据平台前端框架介绍.png 10.7MB
│├─10-16 前端开发框架运行.ev4.mp4 133.3MB
│├─10-17 前端开发及前后端联调实现.ev4.mp4 237.7MB
│├─10-18 【拓展总结】前端开发过程中常见问题.png 21.4MB
│├─10-19 课程总结.ev4.mp4 42.5MB
│├─10-2 QueryObject开发.ev4.mp4 119.3MB
│├─10-3 【实操手册】Java DataFrame设计.png 25.2MB
│├─10-4 DataFrame Wrapper开发.ev4.mp4 186.9MB
│├─10-5 数据查询缓存.ev4.mp4 136.3MB
│├─10-6 数据查询接口开发.ev4.mp4 184.7MB
│├─10-7 数据可视化模块介绍.ev4.mp4 21.2MB
│├─10-8 多种图表setting抽象.ev4.mp4 250.8MB
│├─10-9 图表数据查询类.ev4.mp4 208.9MB
课程资料/
│├─coding417-examples-master.zip 2.1MB