课程介绍

《玩转热门框架 用企业级思维 开发通用够硬的大数据平台》是一门旨在帮助开发者掌握大数据平台开发技能的课程。该课程以企业级思维为指导，结合热门的大数据框架，教授学员们如何构建通用且稳定的大数据平台。

在这门课程中，学员将学习到如何使用热门的大数据框架，如Hadoop、Spark、Kafka等，来搭建大数据平台。课程将从基础开始，介绍这些框架的原理和使用方法，然后逐步深入，教授学员如何在实际项目中应用这些框架。

同时，课程也会注重企业级思维的培养。学员将学习如何设计和构建具有高可用性、可扩展性和安全性的大数据平台。课程将涵盖诸如数据架构设计、集群管理、性能优化、故障处理等方面的内容，帮助学员成为能够应对真实企业需求的大数据平台开发者。

通过学习这门课程，学员将能够掌握开发通用够硬的大数据平台所需的技能和知识。无论是从事大数据平台开发的工作，还是希望在大数据领域有所突破的开发者，都能从这门课程中获得实际的经验和技巧。

课程目录

/【imooc-417】玩转热门框架 用企业级思维 开发通用够硬的大数据平台/
│├─第1章 课程导学与学习指南
│├─第2章 认识企业中的大数据平台
│├─第3章 大数据平台 —— 数据仓库之离线&实时
│├─第4章 大数据平台——数据仓库之权限管理
│├─第5章 大数据平台 —— 调度系统
│├─第6章 大数据平台 —— 计算引擎
│├─第7章 大数据平台建设 —— SQL查询引擎
│├─第8章 大数据平台建设 —— 监控预警
│├─第9章 大数据平台建设 —— 管理整合、任务定制
│├─第10章 系统集成及可视化
│├─课程资料

详细目录

第1章 课程导学与学习指南/
│├─1-1 导学【课程背景、项目速览】.ev4.mp4 90MB
│├─1-2 怎么更好的使用慕课平台.png 30.9MB
│├─1-3 你真的会问问题吗？.png 17.7MB
第2章 认识企业中的大数据平台/
│├─2-1 课程简介与学习建议.ev4.mp4 26.1MB
│├─2-2 什么是大数据平台.ev4.mp4 21.8MB
│├─2-3 为什么要建设大数据平台【三个解决、两个提升】.ev4.mp4 20.5MB
│├─2-4 大数据平台常用技术栈有哪些【知识体系梳理、我们要用哪些】.ev4.mp4 21.6MB
│├─2-5 各大企业大数据平台对比【作业：画出我们的平台架构和这些对比一下】.ev4.mp4 36.1MB
第3章 大数据平台 —— 数据仓库之离线&实时/
│├─3-1 数据仓库VS数据库.ev4.mp4 40MB
│├─3-10 Hive存储结构 ORCFile.ev4.mp4 42.1MB
│├─3-11 【梳理】Hive知识梳理总结.png 11.1MB
│├─3-12 Hive常见面试题.ev4.mp4 29.6MB
│├─3-13 离线数仓VS实时数仓.ev4.mp4 19.3MB
│├─3-14 图解Lambda架构数据流程.ev4.mp4 55.4MB
│├─3-15 Kappa 架构 VS Lambda.ev4.mp4 15.7MB
│├─3-16 主流大公司的实时数仓架构.ev4.mp4 18.2MB
│├─3-2 数据仓库分层建设.ev4.mp4 27.4MB
│├─3-3 Hive是什么【上期思考揭秘：分层的弊端，如何解决】.ev4.mp4 20.2MB
│├─3-4 Hive安装部署【课下任务：预习Hive和Mysql的区别，Hive都有哪些表？】.ev4.mp4.mp4 145MB
│├─3-5 【实操手册】Hive安装部署.png 16.2MB
│├─3-6 Hive基本使用（上）Hive数据类型 分区 基础语法.ev4.mp4 100.9MB
│├─3-7 Hive基本使用（中）内部表 外部表 分区表 分桶表.ev4.mp4 133.4MB
│├─3-8 Hive基本使用（下）内置函数 自定义函数 实现UDF.ev4.mp4 88.5MB
│├─3-9 【作业解答】Hive自定义函数注册.png 7.7MB
第4章 大数据平台——数据仓库之权限管理/
│├─4-1 权限管理（上）Hadoop Hive自带权限控制.ev4.mp4 18.4MB
│├─4-10 数据采集介绍【图解数据采集流程】.ev4.mp4 17.8MB
│├─4-11 常用数据采集工具【图解Sqoop、Flume、DataX】.ev4.mp4 38.1MB
│├─4-13 Datax数据采集实战.ev4.mp4 290.3MB
│├─4-14 【作业解答】Datax完成数据的导入导出.png 15.1MB
│├─4-15 数据治理简介【要解决的问题、元数据、数据血缘】.ev4.mp4 22.5MB
│├─4-16 Apache Atlas数据治理【图解Atlas架构】.ev4.mp4 26.2MB
│├─4-17 数据仓库常见面试题.ev4.mp4 24.2MB
│├─4-2 权限管理（下）实操Hive的权限操作.ev4.mp4 183.9MB
│├─4-3 Kerberos认证简介【对称 非对称加密、数字证书、图解Kerberos流程】mp4.mp4 32.3MB
│├─4-4 Apache Ranger简介【图解Ranger架构、Ranger管理HDFS、Hive、Yarn举例】ev4.mp4.mp4 27.4MB
│├─4-5 Apache Rangr安装.ev4.mp4 100.8MB
│├─4-6 Ranger HDFS Plugin安装.ev4.mp4 126.2MB
│├─4-7 Ranger Hive Plugin安装.ev4.mp4 83.2MB
│├─4-8 【实操手册】Apache Ranger安装部署.png 39.6MB
│├─4-9 Ranger Api Java开发之User管理.ev4.mp4 381.5MB
第5章 大数据平台 —— 调度系统/
│├─5-1 我们需要一个调度系统【任务处理现状、调度系统通用功能】.ev4.mp4 25.1MB
│├─5-10 调度系统相关面试指导.ev4.mp4 18.7MB
│├─5-2 Azkaban介绍【常用开源调度框架对比】.ev4.mp4 20.1MB
│├─5-3 Azkaban架构与调度流程【图解核心交互流程】.ev4.mp4 26.6MB
│├─5-4 Azkaban安装部署.ev4.mp4 169MB
│├─5-5 提交Azkaban任务.ev4.mp4 96.5MB
│├─5-6 【实操手册】Azkaban安装部署及基础使用.png 33.9MB
│├─5-7 Azkaban用户代理.ev4.mp4 80.7MB
│├─5-8 Java程序操作Azkaban Api (上).ev4.mp4 243.2MB
│├─5-9 Java程序操作Azkaban Api（下）.ev4.mp4 186.6MB
第6章 大数据平台 —— 计算引擎/
│├─6-1 Spark简介【Hadoop VS Spark、图解Spark生态】.ev4.mp4 35.4MB
│├─6-10 Spark 自定义UDF开发.ev4.mp4 79MB
│├─6-11 Spark程序开发原则与基础优化【常见调优策略、持久化级别】.ev4.mp4 93.8MB
│├─6-12 Spark 数据倾斜调优.ev4.mp4 79.1MB
│├─6-13 【拓展】Zeppelin安装与使用.png 33.8MB
│├─6-14 Spark面试题答疑.ev4.mp4 43.9MB
│├─6-2 Spark架构及执行流程【根据图解了解Spark名词】.ev4.mp4 44.6MB
│├─6-3 RDD简介及特性【图解WordCount示例中RDD如何转换】.ev4.mp4 32.6MB
│├─6-4 RDD依赖关系【图解Stage划分】.ev4.mp4 27.1MB
│├─6-5 Spark三种部署模式实战.ev4.mp4 309.2MB
│├─6-6 【实操手册】Spark三种部署模式及基本操作.png 23.6MB
│├─6-7 Spark程序开发.ev4.mp4 296.2MB
│├─6-8 SparkSQL简介【RDD VS DataFrame】.ev4.mp4 28.2MB
│├─6-9 SparkSQL程序开发.ev4.mp4 219.4MB
第7章 大数据平台建设 —— SQL查询引擎/
│├─7-1 大数据查询引擎Presto简介【作业：了解其他的SQL on Hadoop方案】.mp4 42MB
│├─7-10 Presto章节小结.ev4.mp4 34.7MB
│├─7-2 Presto架构与执行流程.ev4.mp4 49.5MB
│├─7-3 Presto安装部署.ev4.mp4 167.1MB
│├─7-4 通过Jdbc操作Presto.ev4.mp4 191.9MB
│├─7-5 Presto UDF开发（上）.ev4.mp4 178.2MB
│├─7-6 Presto UDF开发（下）.ev4.mp4 129.2MB
│├─7-7 Presto EventListener开发.ev4.mp4 307.1MB
│├─7-8 【拓展总结】Presto on Yarn.png 27.1MB
│├─7-9 Presto配置优化.ev4.mp4 55.8MB
第8章 大数据平台建设 —— 监控预警/
│├─8-1 监控系统介绍.ev4.mp4 19.4MB
│├─8-10 Push数据脚本开发.ev4.mp4 63.8MB
│├─8-11 【实操手册】Grafana安装并使用OpenFalcon数据源.png 12.2MB
│├─8-12 Grafana监控大盘配置.ev4.mp4 145.1MB
│├─8-13 监控系统 章节小结.ev4.mp4 29.9MB
│├─8-2 常用开源监控项目对比【Zabbix VS OpenFalcon VS Prometheus】.ev4.mp4 59.4MB
│├─8-3 OpenFalcon各个组件介绍.ev4.mp4 29.7MB
│├─8-4 OpenFalcon单机版部署.ev4.mp4 281.9MB
│├─8-5 【实操手册】OpenFalcon 安装部署.png 9.7MB
│├─8-6 OpenFalcon基本使用.ev4.mp4 120MB
│├─8-7 OpenFalcon邮件网关安装.ev4.mp4 83.2MB
│├─8-8 实现OpenFalcon对Hadoop服务状态报警.ev4.mp4 53.6MB
│├─8-9 自定义Plugin开发.ev4.mp4 190.4MB
第9章 大数据平台建设 —— 管理整合、任务定制/
│├─9-1 Naga数据平台介绍.ev4.mp4 45.6MB
│├─9-10 任务管理模块介绍.ev4.mp4 97.7MB
│├─9-11 插件抽象及解析代码开发.ev4.mp4 286.8MB
│├─9-12 插件接口及测试.ev4.mp4 180.1MB
│├─9-13 任务流程实体类开发.ev4.mp4 22.5MB
│├─9-14 创建流程及提交流程开发.ev4.mp4 255.2MB
│├─9-15 【实操手册】生成azkaban job文件.png 21.2MB
│├─9-16 插件参数及变量介绍.ev4.mp4 38.9MB
│├─9-17 引用参数解析方法开发.ev4.mp4 196.3MB
│├─9-18 插件SDK模块开发.ev4.mp4 234.9MB
│├─9-19 Java插件开发示例.ev4.mp4 149.6MB
│├─9-2 Naga大数据平台功能介绍.ev4.mp4 114.9MB
│├─9-20 Spark插件开发示例.ev4.mp4 79.7MB
│├─9-21 【实操手册】Naga Plugin Python SDK开发.png 18.9MB
│├─9-3 Naga 开发工具及基本类介绍.ev4.mp4 290.9MB
│├─9-4 集群概览模块实体类开发.ev4.mp4 433.8MB
│├─9-5 集群概览模块核心功能开发.ev4.mp4 334.1MB
│├─9-6 集群概览接口开发及测试.ev4.mp4 131.6MB
│├─9-7 业务线Entity开发.ev4.mp4 237.1MB
│├─9-8 Hadoop及Hive Client开发.ev4.mp4 328.9MB
│├─9-9 业务线Controller开发.ev4.mp4 211.5MB
第10章 系统集成及可视化/
│├─10-1 数据查询架构介绍.ev4.mp4 17.4MB
│├─10-10 可视化接口开发及测试.ev4.mp4 82.4MB
│├─10-11 Naga平台用户模型介绍.ev4.mp4 17.8MB
│├─10-12 用户登录认证功能.ev4.mp4 209.6MB
│├─10-13 用户权限认证功能.ev4.mp4 113.5MB
│├─10-14 审计日志功能.ev4.mp4 148.9MB
│├─10-15 【拓展总结】 Naga大数据平台前端框架介绍.png 10.7MB
│├─10-16 前端开发框架运行.ev4.mp4 133.3MB
│├─10-17 前端开发及前后端联调实现.ev4.mp4 237.7MB
│├─10-18 【拓展总结】前端开发过程中常见问题.png 21.4MB
│├─10-19 课程总结.ev4.mp4 42.5MB
│├─10-2 QueryObject开发.ev4.mp4 119.3MB
│├─10-3 【实操手册】Java DataFrame设计.png 25.2MB
│├─10-4 DataFrame Wrapper开发.ev4.mp4 186.9MB
│├─10-5 数据查询缓存.ev4.mp4 136.3MB
│├─10-6 数据查询接口开发.ev4.mp4 184.7MB
│├─10-7 数据可视化模块介绍.ev4.mp4 21.2MB
│├─10-8 多种图表setting抽象.ev4.mp4 250.8MB
│├─10-9 图表数据查询类.ev4.mp4 208.9MB
课程资料/
│├─coding417-examples-master.zip 2.1MB