Kafka多维度系统精讲,从基础入门到实战案例开发
集核心API剖析+应用实战+最优配置+面试考点于一体
本课从搭建开始,全面剖析Kafka,解读和使用核心API,将底层实现和设计原理融合贯穿,同时结合案例,把原理落地。更有凝结老师心血的Kafka最佳配置方式推荐,以及面试常问知识点梳理。
〖课程目录〗:
- 第1章 课程导学与学习指南 4 节 | 9分钟
- 本节主要进行课程的介绍,学习路线与指南,如何更好的学习本课程,为什么要学习本课程,学习本课程具体能收获什么?
-
- 视频:1-1 导学 (08:27)
- 图文:1-2 怎么更好的使用慕课平台?
- 图文:1-3 如何提一个好问题,得到老师最大程度的帮助呢?
- 作业:1-4 【讨论题】学习中如何做总结
- 第2章 Kafka入门——开发环境准备7 节 | 34分钟
- 带你从0起步,在正式安装Kafka之前,先搭建好开发环境
-
- 视频:2-1 环境准备 (11:15)
- 视频:2-2 VMware安装 (04:18)
- 视频:2-3 VMware添加Centos镜像 (03:16)
- 视频:2-4 CentOS7安装 (07:20)
- 视频:2-5 XShell使用介绍 (05:16)
- 视频:2-6 环境准备常见问题介绍 (02:05)
- 作业:2-7 【总结】Kafka和MQ的区别,以及设计过程如何区别
- 第3章 Kafka入门——Kafka基础操作 7 节 | 29分钟
- 带你快速的上手Kafka,了解Kafka的常见命令、基本概念。理解基本概念之间的关系,特别是Topic与Partition之间的关系。
-
- 视频:3-1 章节介绍 (01:37)
- 视频:3-2 kafka自我介绍 (03:44)
- 视频:3-3 JDK安装 (05:13)
- 视频:3-4 Zookeeper安装启动 (02:27)
- 视频:3-5 kafka配置 (02:07)
- 视频:3-6 Kafka基本概念及使用演示 (13:04)
- 作业:3-7 列举几个Kafka在大数据的应用场景
- 第4章 Kafka核心API——Kafka客户端操作 11 节 | 62分钟
- 开始正式讲授Kafka的API,先从客户端操作开始,学会创建查看删除Topic。Topic配置信息修改和Partition增加。
-
- 视频:4-1 内容概述 (01:17)
- 视频:4-2 五类Kafka客户端作用和区别 (03:54)
- 视频:4-3 学习准备-初始化工程 (05:58)
- 视频:4-4 AdminClient客户端建立 (07:53)
- 视频:4-5 创建Topic演示 (05:50)
- 视频:4-6 查看Topic列表及Internal杂谈 (07:01)
- 视频:4-7 删除Topic (02:44)
- 视频:4-8 Topic描述信息查看 (05:41)
- 视频:4-9 Topic配置信息查看 (06:49)
- 视频:4-10 Topic配置信息修改 (09:25)
- 视频:4-11 Partition增加 (05:10)
- 第5章 Kafka核心API——Producer生产者10 节 | 55分钟
- 介绍Kafka Producer的发送消息的几种方式,以及发送原理。Producer一共有三种发送模式:同步、异步、异步回调,其发送原理也分为:直接发送、负载均衡、异步发送。本章会结合实战小案例、源码与画图帮助同学理解。
-
- 视频:5-1 Producer章节介绍 (01:46)
- 视频:5-2 Producer异步发送演示 (10:49)
- 视频:5-3 Producer异步阻塞发送演示 (04:37)
- 视频:5-4 Producer异步回调发送演示 (04:22)
- 视频:5-5 Producer源码讲解 (12:23)
- 视频:5-6 Producer生产者原理 (06:04)
- 视频:5-7 Producer自定义Partition负载均衡 (08:27)
- 视频:5-8 消息传递保障 (06:06)
- 图文:5-9 Producer发送数据带自定义分区情况下,打印日志发现会出现多条重复问题分析
- 作业:5-10 如果让你设计一个消息队列,你会考虑几个方面
- 第6章 实战“慕问卷”开发 —— 微信小程序部分14 节 | 108分钟
- 现在我们趁热打铁,对前面所学的知识做一个综合实战。这里主要锻炼Producer的使用。完成“慕问卷”的小程序后端与Kafka的交互。
-
- 视频:6-1 Producer实现介绍 (02:36)
- 视频:6-2 微信小程序业务介绍 (05:27)
- 视频:6-3 基础环境准备 (08:23)
- 视频:6-4 微信模板配置创建及解析 (13:14)
- 视频:6-5 微信小程序后台逻辑层实现 (08:16)
- 视频:6-6 微信小程序表现层基础构建 (04:20)
- 视频:6-7 微信小程序表现层实现 (04:04)
- 视频:6-8 微信小程序业务测试 (02:53)
- 视频:6-9 Kafka Producer集成 (21:55)
- 视频:6-10 CA证书申请及域名绑定 (05:19)
- 视频:6-11 Springboot工程集成SSL证书 (06:05)
- 视频:6-12 阿里云部署微信小程序后端 (08:16)
- 视频:6-13 微信小程序部署准备工作 (06:15)
- 视频:6-14 微信小程序编译部署 (10:53)
- 第7章 Kafka核心API——Consumer10 节 | 80分钟
- 接下来介绍另一个非常重要的核心API。讲授Consumer Group、offset、Rebalance等关键概念,并手把手进行演练开发
-
- 视频:7-1 Consumer介绍 (02:27)
- 视频:7-2 Consumer之HelloWorld (08:04)
- 视频:7-3 Consumer之手动提交 (07:52)
- 视频:7-4 Consumer演示观后感 (07:23)
- 视频:7-5 Consumer单Partition提交offset (11:31)
- 视频:7-6 Consumer手动控制一到多个分区 (05:42)
- 视频:7-7 Consumer多线程并发处理 (10:12)
- 视频:7-8 Consumer控制offset起始位置 (09:57)
- 视频:7-9 面试点:Consumer限流 (10:48)
- 视频:7-10 面试点:Consumer Rebalance解析 (05:15)
- 第8章 Kafka核心API——Stream7 节 | 42分钟
- 除了消费者与生产者,Kafka作为流处理平台,还有一个非常重要的API:Stream。本章讲授Kafka的流处理过程,了解基本概念及关键词。掌握 Kafka Stream 的高层架构。完成相关开发
-
- 视频:8-1 Kafka Stream介绍 (00:58)
- 视频:8-2 Kafka Stream概念及初识高层架构图 (02:58)
- 视频:8-3 Kafka Stream 核心概念讲解 (03:16)
- 视频:8-4 Kafka Stream 演示准备 (06:03)
- 视频:8-5 Kafka Stream使用演示 (14:12)
- 视频:8-6 Kafka Stream程序解析 (09:09)
- 视频:8-7 Kafka Stream算子演示讲解 (04:38)
- 第9章 Kafka核心API——Connect6 节 | 38分钟
- 本章我们学习最后一个核心API:Connect,它主要用来与其他中间件建立流式通道。本章我们会逐步了解其中的基本概念和关键词。进而掌握高级架构和使用。
-
- 视频:9-1 Kafka Connect章节介绍 (00:37)
- 视频:9-2 Kafka Connect基本概念介绍 (03:22)
- 视频:9-3 Kakfa Connect环境准备 (13:51)
- 视频:9-4 Kafka Connect Source和MySQL集成 (06:22)
- 视频:9-5 Kafka Connect Sink和MySQL集成 (05:30)
- 视频:9-6 Kafka Connect原理及使用场景介绍 (07:20)
- 第10章 Kafka集群部署与开发8 节 | 41分钟
- 本章将带领大家完成Kafka的集群部署及相应的开发,同时演示如何使用Zookeeper完成包括Broker注册、Topic注册等
-
- 视频:10-1 Kafka集群篇介绍 (01:04)
- 视频:10-2 Kafka集群部署配置讲解 (04:41)
- 视频:10-3 Kafka集群部署并启动 (04:27)
- 视频:10-4 Kafka副本集-1 (03:41)
- 视频:10-5 Kafka副本集-2 (05:22)
- 视频:10-6 图解Kafka集群基本概念 (05:30)
- 视频:10-7 Kafka节点故障原因及处理方式 (06:05)
- 视频:10-8 面试点:Kafka Leader选举机制 (09:35)
- 第11章 Kafka集群监控、安全与最佳实践9 节 | 69分钟
- 本章节介绍了成熟的第三方管理界面 Kafka Manager的使用,Kafka的监控与安全防范措施,讲述如何在生产环境下安全使用Kafka。并且介绍了Kafka的部署及配置调优,给出经验之谈,推荐最佳实践方式
-
- 视频:11-1 集群监控安全介绍 (01:20)
- 视频:11-2 Kafka监控安装 (07:51)
- 视频:11-3 Kafka监控界面讲解 (11:31)
- 视频:11-4 Kafka SSL签名库生成 (08:38)
- 视频:11-5 Kafka SSL服务端集成 (07:07)
- 视频:11-6 Kafka SSL客户端集成 (09:11)
- 视频:11-7 Kafka最佳实践介绍 (03:43)
- 视频:11-8 Kafka最佳实践配置项讲解 (11:01)
- 视频:11-9 Kafka服务器配置最佳实践讲解 (07:48)
- 第12章 实战“慕问卷”开发 —— 集成微服务12 节 | 59分钟
- 本章会在第6章基础上,分别介绍Spring Cloud Config和Spring Cloud Bus,搭建服务总线和消息总线。让大家体验Kafka和微服务的整合使用。完善“慕问卷”的开发。
-
- 视频:12-1 SpringCloud Config内容介绍 (01:45)
- 视频:12-2 SpringCloud Config架构图介绍 (04:33)
- 视频:12-3 SpringCloud演示环境准备 (05:05)
- 视频:12-4 SpringCloud Config Server配置使用 (08:01)
- 视频:12-5 SpringCloud Client配置使用 (05:26)
- 视频:12-6 SpringCloud Config动态刷新准备 (05:57)
- 视频:12-7 SpringCloud Config 动态刷新演示 (04:47)
- 视频:12-8 SpringCloud Config配置使用环节回顾 (01:31)
- 视频:12-9 SpringCloud Bus内容介绍 (01:02)
- 视频:12-10 SpringCloud Bus架构图讲解 (06:43)
- 视频:12-11 SpringCloud Bus动态刷新使用演示 (05:18)
- 视频:12-12 SpringCloud Bus演示多服务动态刷新 (08:47)
- 第13章 Kafka面试点梳理15 节 | 135分钟
- 本章会对前面零散提到的面试点进行梳理,并做补充,使大家头脑中形成一个完整的Kafka体系,又能明确考察重点。帮助大家度过面试难关。
-
- 视频:13-1 Kafka面试题内容介绍及面试建议 (03:50)
- 视频:13-2 Kafka概念及优劣势分析 (11:34)
- 视频:13-3 Kafka吞吐量大的原因分析 (05:15)
- 视频:13-4 Kafka日志检索底层原理 (13:03)
- 视频:13-5 Kafka 零拷贝原理分析 (05:13)
- 视频:13-6 消费者组与消费者 (03:34)
- 视频:13-7 Producer客户端 (05:13)
- 视频:13-8 Kafka消息有序性处理 (05:24)
- 视频:13-9 Kafka Topic删除背后的故事 (08:01)
- 视频:13-10 消息重复消费和漏消费原理分析 (18:01)
- 视频:13-11 消费者线程安全性分析 (07:10)
- 视频:13-12 Kafka Leader选举分析 (14:50)
- 视频:13-13 Kafka幂等性源码分析 (16:20)
- 视频:13-14 Kafka事务支持实现及原理分析 (17:18)
- 作业:13-15 总结Kafka面试问题
〖视频截图〗:
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。