在线客服
扫描二维码
下载博学谷APP
扫描二维码
关注博学谷微信公众号
Kafka开发分布发布订阅消息系统学习路线,Kafka是一种快速可扩展设计内在分布式,分区的和可复制的分布式发布-订阅消息系统,被数千家公司使用。可以帮助使用Apache Kafka消息传递系统或者大数据分析领域发展的IT程序员解决使用Kafka集群的问题。

分布发布订阅消息系统学习路线:
一、初识Kafka
1、概念详解
2、安装与配置
3、Java第一个程序
4、服务端常用参数配置
二、生产者
1、消息发送
2、原理剖析
3、生产者参数详解
三、消费者
1、概念入门
2、消息接收
四、主题
1、管理
2、增加分区
3、必要参数配置
4、偏移量管理
五、分区
1、副本机制
2、Leader选举
3、分区重新分配
4、自动再均衡
5、修改副本因子
6、分区分配策略
六、物理存储
1、日志存储概述
2、磁盘存储
七、稳定性
1、事务
2、控制器
3、可靠性保证
4、一致性保证
八、高级应用
1、命令行工具
2、数据管道
3、延时队列
4、流式处理
5、SpringBoot整合
九、集群管理
1、集群使用场景
2、集群搭建
3、多集群同步
十、监控
1、监控度量指标
2、Broker监控
3、主题分区监控
4、生产者监控
5、消费者监控
6、Kafka、Eagle
学习Kafka架构技术优势:
Kafka集群在运行期间可以轻松地扩展或收缩可以添加或删除代理,而不会宕机。可以扩展一个Kafka主题来包含更多的分区。由于一个分区无法扩展到多个代理,所以它的容量受到代理磁盘空间的限制。能够增加分区和代理的数量意味着单个主题可以存储的数据量是没有限制的。
容错性和可靠性Kafka 的设计方式使某个代理的故障能够被集群中的其他代理检测到。由于每个主题都可以在多个代理上复制,所以集群可以在不中断服务的情况下从此类故障中恢复并继续运行。
关于Kafka使用价值场景:
1、日志收集:一个公司可以用Kafka可以收集各种服务的log,通过kafka以统一接口服务的方式开放给各种consumer,例如Hadoop、Hbase、Solr等;
2、消息系统:解耦和生产者和消费者、缓存消息等;
3、用户活动跟踪:Kafka经常被用来记录web用户或者app用户的各种活动,如浏览网页、搜索、点击等活动,这些活动信息被各个服务器发布到kafka的topic中,然后订阅者通过订阅这些topic来做实时的监控分析,或者装载到Hadoop、数据仓库中做离线分析和挖掘;
4、运营指标:Kafka也经常用来记录运营监控数据。包括收集各种分布式应用的数据,生产各种操作的集中反馈,比如报警和报告;
5、流式处理:比如spark streaming和storm;
7、事件源。
— 申请免费试学名额 —
在职想转行提升,担心学不会?根据个人情况规划学习路线,闯关式自适应学习模式保证学习效果
讲师一对一辅导,在线答疑解惑,指导就业!
相关推荐 更多
Dubbox分布式服务框架全面学习
谈到分布式服务框架Dubbox,我们不得不提到它的前身——阿里巴巴开源项目Dubbo 。因为后面当当网对Dubbo进行了优化并维护,所以才有了现在的Dubbox。Dubbox的优势不用多说,相信大家都或多或少有所了解,它能提供高性能和透明化的RPC远程服务调用方案,以及SOA服务治理方案。本篇文章将着重给大家介绍Dubbox分布式服务框架的学习教程,感兴趣的朋友就一起来看看吧!
7195
2019-12-09 15:26:52
Java程序员Spring Security安全框架需要学什么?
作为一个Java程序员需要掌握Spring Security安全框架,学习Spring Security概念、项目认证功能、项目授权功能、Spring Security集成spring boot、相关实战项目。Spring Security是Spring旗下一款强大的安全框架,是企业常用的安全框架。
9003
2019-12-17 17:41:04
零基础入门Java从哪里开始?
Java在编程语言中老大哥的地位,一直以来都是无法撼动的!因此Java也往往是许多零基础编程初学者的首选语言,然而对于大多数小白来讲,最困惑的事情莫过于零基础入门Java应该从哪里开始。众所周知,学习最重要的就是要有一个系统的规划,这样才不至于在一开始就走错方向。因此本文为大家整理了一条初学者的入门路线,大家可以先参考以下的这份学习大纲开始学习~
6033
2020-04-27 10:10:46
如何学习Spring框架?有哪些建议?
Spring作为当前最火热的Java开发框架,是每一个Java开发者都必须熟练掌握的技能。Spring框架是一系列应用框架的核心,也是SpringBoot的基础,它包含Spring、SpringMVC、SrpingTest等。如何学习Spring框架?有哪些建议?相信这些都是绝大所数学习者的问题,下面我们来一起聊聊Spring框架的学习建议~
9360
2020-06-10 18:39:28
微服务和分布式的区别什么?有什么特点?
微服务设计是为了不因为某个模块的升级和BUG影响现有的系统业务。微服务与分布式的细微差别是,微服务的应用不一定是分散在多个服务器上也可以是同一个服务器。分布式属于微服务,将模块拆分成一个独立的服务单元通过接口来实现数据的交互。分布式和微服的架构很相似,只是部署的方式不一样而已。
7099
2021-03-10 11:10:50
