课程背景
这几年,随着越来越多的业务对数据的实时性提出了高要求,实时流计算技术变得越来越火,阿里、字节、京东等互联网大厂都在用它来处理用户兴趣分析,实时异常检测、在线反欺诈和金融风控等实时业务。
然而,想要真正搞懂并会运用实时流计算并不容易,NIO和异步编程、高并发编程、分布式处理、实时算法开发……这些都是阻碍你掌握实时流计算的拦路虎。
专栏解读
为了帮你攻克相关技术难点,专栏给你设计了一条系统、高效的学习路径,共四个模块,从“系统架构”和“实时算法”两方面入手,由浅入深、自底而上带你扎实掌握实时流计算。
① 模块一:实时流计算入门
这部分会介绍流计算系统的整体架构和使用场景,以及入门需掌握的编程基础,比如 NIO 和异步编程,以及异步系统中的 OOM 和反向压力问题,学完你会对实时流计算有个整体的认识,对“流”的本质有个初步理解。
②模块二:自己动手做一个流计算框架
这部分会介绍如何从 JDK 里最基础的工具类,一步步开发出一个分布式流计算框架。通过这种自己动手的方式,你会更深刻理解流计算系统的核心概念及实现原理。
③模块三:核心技术篇
这部分详细讲解流计算能够解决哪些类型的问题(流数据操作、时间维度聚合计算、关联图谱分析、事件序列分析、模型学习和预测)。还讨论了流计算过程中重要的状态管理问题,带你思考如何将前面的流计算框架扩展为分布式系统。你会掌握实时流计算中的各种算法,帮你解决各种实时业务场景中的问题。
④模块四:开源流计算框架原理解析及实战
这部分会对比分析 4 种开源流计算框架的具体实现,来巩固你对流计算核心概念和技术的理解,并带你正确理解这些框架的 API 设计,以便你在实际业务场景中灵活应用,实现各种复杂的业务逻辑。
此外,专栏还会通过两个实践案例(实时风控和实时数据同步),带你将开源流计算框架运用到具体的业务场景中。
周爽
资深系统架构师
曾就职于华为技术有限公司 2012 实验室高斯部门,从事实时分析型内存数据库 RTANA 研发,并搭建了最初版本的华为公有云 RDS 服务系统,特别擅长高并发编程以及实时流计算技术,有 7 年 Java 相关开发经验。
还曾担任上海行邑 Maxent 移动反欺诈产品项目负责人及技术负责人,负责移动设备指纹及反欺诈技术研发。现著有《实时流计算系统设计与实现》一书。
课程目录
开篇词
- 开篇词 | 攻克实时流计算难点,掌握大数据未来!.mp4
模块一 实时流计算入门
- 01 | 实时流计算的通用架构.mp4
- 02 | 异步和高并发:为什么 NIO 是异步和高并发编程的基础?.mp4
- 03 | 反向压力:如何避免异步系统中的 OOM 问题?.mp4
- 04 | 流与异步:为什么说掌握流计算先要理解异步编程?.mp4
模块二 自己动手做一个流计算框架
- 05 | 有向无环图(DAG):如何描述、分解流计算过程?.mp4
- 06 | CompletableFuture:如何理解 Java 8 新引入的异步编程类?.mp4
- 07 | 死锁:为什么流计算应用突然卡住,不处理数据了?.mp4
- 08 | 性能调优:如何优化流计算应用?.mp4
模块三 流计算到底在计算什么
- 09 | 流数据操作:最基本的流计算功能.mp4
- 10 | 时间维度聚合计算:如何在长时间窗口上实时计算聚合值?.mp4
- 11 | 关联图谱分析:如何用 Lambda 架构实现实时的社交网络分析?.mp4
- 12 | 事件序列分析:大家都在说的 CEP 是怎么一回事?.mp4
- 13 | 模型学习和预测:如何检查流数据异常?.mp4
- 14 | 状态管理:为什么说流计算是有“状态”的?.mp4
- 15 | 扩展为集群:如何实现分布式状态存储?.mp4
模块四 开源流计算框架原理解析及实战
- 16 | Apache Storm:最早的开源流计算框架.mp4
- 17 | Spark Streaming:从批处理走向流处理.mp4
- 18 | Apache Samza:最简洁的开源流计算框架.mp4
- 19 | Apache Flink:最惊艳的开源流计算框架.mp4
- 20 | 场景案例:如何用 Flink 实现实时风控引擎?.mp4
- 21 | 场景案例:如何用 Flink SQL CDC 实现实时数据同步?.mp4
彩蛋
- 彩蛋 1 | 竟然还有分布式的 JVM?.mp4
- 彩蛋 2 | 穷途末路的选择:Lambda 架构.mp4
结束语
- 结束语 | Java 程序员的成长之路和从业方向.mp4
①本站所有资源均由用户自发贡献上传,用户自发分享网盘链接,仅限用于试看学习和参考,不得将上述资源用于商业或其它非法用途,否则一切后果请用户自负,与本站无关。
②本站所有资源均为免费提供,目的是让大家节省学习和摸索的成本,所收取的相应费用并非资源销售费用,而是打赏捐赠给资源提供者收集、整理、后期维护服务的辛苦费,与本站无利益关联。若需提供增值服务,则额外打赏资源提供者即可!
③资源下载后,请于24小时内从您的电脑中彻底删除!如您喜欢请移步官方网站购买,将得到更好的学习交流服务。
④所有资源均来自网络,版权归原作者所有,本站仅提供展示信息,一切问题与本站无关!
⑤如若侵犯到您的权益,请提供相关证明文件,按处理流程给我们反馈【侵权资源处理流程】,我们将在72小时内处理!如没有提供相关文件,一律视为诈骗恶搞,将拉黑处理!